어느 순간부터 구글검색노출이 갑자기 안 되는 증상이 생겼습니다. 구글검색노출이 안 되는 증상이란 단순히 포스팅글 순위가 밀려서 검색결과에 나오지 않는 현상이 아니라 지금까지 꾸준히 노출이 잘되던 키워드도 노출이 안되고, 구글 검색창에 키워드로 검색을 하거나 글 전체 제목을 그대로 복사해서 검색해도 나타나지 않는 상태를 말합니다.
단순히 몇 개의 포스팅에서만 해당 문제가 발생하는 것이 아닌 대부분의 모든 글에서 동일하게 발생하고 있습니다. 저뿐만 아니라 위와 같은 증상이 여러 블로그나 사이트에서 발생하고 있습니다. 제가 운영하는 다른 사이트에서도 구글검색노출이 갑자기 안되고 있어 15일 넘게 해결하기 위해 많은 검색을 하고 해결 방안을 알아보고 원인 분석을 해보았습니다. 나름 중요한 원인과 해결을 위한 방법을 같은 증상으로 고민하시는 분들에게 공유하고자 이 포스팅을 작성하게 되었습니다.
구글검색노출 누락 시작 및 증상
워드프레스를 처음 시작한 것은 2023년 7월 20일입니다. 현시점까지 약 70여 글을 발행하였고 몇 개의 포스팅에서 노출이 잘되어 지금까지 1.55만 정도의 노출량과 140회 정도의 클릭 수를 발생시키고 있었습니다.
그런데 9월 7일경 오후부터 평균게재순위도 확인할 겸 평소처럼 제 블로그에서 노출이 잘되던 키워드로 검색을 했는데 검색결과에 제 포스팅이 보이지 않았습니다. 처음에는 ‘그사이 게재순위가 뒤로 밀렸나?’생각이 들어 계속 뒤로 넘겨 보았는데 맨 끝까지 제 글이 나타나지 않았습니다.
처음엔 단순한 오류정도로 생각하고 다른 글들로 동일하게 검색하였고, 글 제목 전체로 검색해도 동일하게 모든 글이 노출되지 않는다는 것을 확인하고 이건 단순히 게재순위가 밀린 것이 아닌 시스템 적으로 문제가 생겼다고 확신이 들었습니다.
▼구글 서치콘솔 실적데이터를 보면 본격적으로 글을 발행하는 시점 8월 20일부터 노출이 발생했고, 문제점이 발견된 시점 9월 7일 이후 노출이 거의 0으로 수렴된 걸 보실 수 있습니다.
워드프레스 강의를 듣다 보면 샌드박스 기간이라는 단어를 들어보셨을 겁니다. 샌드박스 기간이란 새로운 사이트(블로그)를 만들게 되면 구글에서 해당 사이트를 신뢰를 처음부터 할 수가 없으니 보통 6개월 정도의 기간 동안 상단에 노출시키지 않고 지켜보는 기간을 말합니다.
하지만 제가 발행한 일부 글들은 샌드박스 기간과 상관없이 몇 개의 글은 게재순위 10위권 안에 포진되어 노출이 잘 돼 오던 검색어 및 글이였습니다. 따라서 샌드박스 기간에 따라 현재 노출이 안 되는 것이 아니라 노출이 잘되던 포스팅이 갑자기 색인이 안 되는 현상이기 때문에 원인과 증상이 다릅니다.
저는 이 문제에 대해 이렇게 정의하려 합니다. post(글)가 구글색인이 되어 그동안 노출이 되었지만, 갑자기 색인오류 문제가 발생한 것이 아니고 현재도 색인은 되어 있는데, 구글 검색로봇이 내 글들을 검색결과에 인덱싱 해가지 않는 현상입니다. 조금 어려운 해석일 수도 있는데 아래 글들을 보시면 어느 정도 이해가 가실 겁니다.
구글검색노출이 갑자기 안될때 확인 방법
구글에서 검색했을 때 해당 글이 노출되지 않을 때 문제가 발생해 누락된 것인지 아니면 단순히 게재 순위가 뒤로 밀려서 검색결과에 나오지 않는지 확인하려면 다음과 같이 확인해 보시기 바랍니다.
1.구글검색창에 글 제목을 그대로 입력
새로 글을 올렸거나 이전에 올린 글들이 구글에서 색인이 되었는지 확인하기 위해서 구글 검색창에 포스팅 전체제목을 입력하고 검색하면 작성한 글이 검색결과에 노출되어야 정상입니다. 만약 노출이 되지 않는다면 첫째 해당 글이 색인이 아직 안되었을 경우이며 이경우에는 서치콘솔에서 url검사를 통해 색인여부를 테스트해 보시기 바랍니다. 색인이 안되었다면 색인요청을 클릭해서 검색결과에 나타나도록 조치를 해야 합니다.
만약 두 번째 서치콘솔에서도 색인이 되었다고 나오는데도 검색 결과에 나타나지 않는다면 제가 말하는 검색누락에 해당됩니다. 앞에서도 설명드린 바와 같이 웬만해서는 글 제목을 그대로 복사해서 검색하면 웬만하면 검색결과에 노출되게 됩니다. 만약 다른 글들도 동일하게 테스트했는데 전부 나타나지 않는다면, 사이트맵이 오류이거나 구글에서 저 품질 처리 또는 구글 봇이 정상적으로 활동을 하지 않나 해당사이트에 대한 모든 글 들을 인덱싱 처리 하지 않고 있는 상태입니다. 사이트맵 오류에 대한 해결방안은 아래에서 자세히 소개해 드리겠습니다.
2. 구글검색창에 사이트(블로그)타이틀로 검색
두 번째 확인방법입니다. 구글 검색창에 사이트 타이틀로 검색하는 방법입니다. 사이트 url로 검색하는 방법이 아니고 사이트 제목(블로그 제목)으로 검색하는 방법입니다.
현재 사이트가 문제없다면 해당 방법으로 검색하게 되면 검색 결과에 사이트 메인 페이지가 노출되어야 하는데 나타나지 않는 증상입니다. 마찬가지로 원인은 사이트맵 오류 또는 구글 저 품질 및 어떠한 이유인지는 모르지만 구글에서 검색 결과에 노출시키지 않고 있다는 것입니다.
▼사이트 제목으로 검색 시 검색결과에 사이트페이지가 노출되어야 합니다. 아래와 같이 제가 운영하는 사이트 제목인 ‘garage매거진’으로 검색했을 경우 나타나고 있지 않습니다.
3. 구글서치콘솔에서 사이트맵 확인
1번과 2번을 통해 구글에서 노출이 누락되는 부분을 확인하셨다면 마지막으로 서치콘솔에서 테스트해보시기 바랍니다. 간혹 색인이 되었었는데 특별한 이유 없이 색인이 다시 안된 상태인 경우가 있기에 확인이 필요합니다. 확인 방법은 서치콘솔 ‘url검사’ 항목을 클릭해서 포스팅 페이지 url을 입력해서 색인생성 여부를 확인해 보시기 바랍니다. 확인 결과 색인이 생성 안되어 있다면 다시 생성 요청을 하시면 해결이 됩니다.
▼저의 경우 아래와 같이 url검사를 실시한 결과 ‘url이 구글에 등록되어 있음’이라고 표기됩니다. 즉 색인이 생성되었지만 노출이 되고 있지 않는 정말 알 수 없는 상태입니다.
보통 해당 포스팅글에 문제가 있다면 해당 포스팅만 색인이 안되어지거나 서치콘솔 보안 및 직접 조치에 문제점이 표기가 되는데 아무런 알람이 뜨지 않는 상태입니다.
전문가에게 조언을 구한 결과 제 사이트의 경우 구글에서 크롤링은 잘 되고 있지만 인덱싱이 안되고 있다는 분석결과를 전달받았습니다.
저와 같은 증상이 나타난다면 어떤 이유인지는 모르지만 구글에서 사이트에 대한 검색 노출을 제한하고 있다고 생각하시면 됩니다.
구글노출 누락에 대한 원인 분석 및 추론
구글검색노출이 갑자기 안 되는 현상에 대한 원인을 알아야 조치를 취하거나 해결할 수 있습니다. 제가 제시하는 몇 가지 발생할 수 있는 원인에 대해 검토해 보시기 바랍니다.
1.외부유입 백링크
여러 가지 원인 중에서 전 제일 먼저 외부유입 백링크에 대한 원인에 대해 생각해 보았습니다. 왜냐하면 문제가 발생한 바로 3일 전에 외부유입 백링크를 시도했기 때문입니다.
제가 말하는 외부유입 백링크는 워드프레스 네이버 카페에 제 사이트를 주소를 올리고 홍보하는 글을 올렸습니다. 젯팩통계를 통해 이러한 백링크를 통해 하루에 30명 정도가 제 사이트를 방문한 기록을 확인하였습니다.
물론 네이버 카페는 대부분의 백링크에 대해 nofllow처리를 하기 때문에 백링크 처리가 안된다고 알고 있기에 추측 정도로만 생각해 주시기 바랍니다. 이러한 이유도 있고 다른 블로그 운영자들은 네이버 지식인이나 기타 카페 등을 통해 많은 외부 유입을 진행하는데도 문제가 없는데?라고 생각을 했지만 제가 판단한 근거는 다음과 같습니다.
1) 특정 포스팅에 대한 백링크가 아니라 사이트 메인으로 백링크 유입 이어서 한 두 달 정도밖에 되지 않은 사이트에 갑자기 많은 사람들이 메인 페이지만 보고 금방 나가버리기에 구글 봇이 스팸 처리를 할 수도 있다는 생각이 들었습니다.
2) 또한 외부유입이 진행이 되면서 그사이 발행한 몇 개의 글들은 아직 색인 생성이 안된 상태인데 사람들이 색인이 되지 않은 글을 먼저 보게 되는 아이러니한 현상이 발생(참조하는 사이트맵이 없고, 색인이 되지 않았는데 클릭이 발생)되어 스팸처리 된 것 같다는 생각입니다.
2. 사이트맵 오류 가능성
사이트맵 오류로 구글색인이 정상적으로 안될 수도 있습니다. 하지만 나중에 알았지만 사이트맵 오류가 발생하게 되면 대부분 서치콘솔에서 해당 메시지가 나타나게 됩니다. 예를 들어 사이트맵 설정을 잘못 건드려서 사이트맵 포스팅 글들이 리디렉션 처리가 되었거나 하는 경우입니다.
저 같은 경우는 사이트맵 오류일 수 있다는 가정하에 사이트맵을 삭제하고 새롭게 사이트맵을 등록해보았지만 사이트맵 오류 또는 이상이 생겨 발생한 증상은 아니라는 결론을 내렸습니다.
사이트맵 삭제 및 재 등록 방법 및 사이트맵에 대해 자세히 알고 싶으신 분은 아래 관련 글에 정말 자세히 소개가 되어 있으니 꼭 읽어보시기 바랍니다. 현재 자신의 사이트맵이 어떤 경로나 플러그인을 통해 적용이 되어 있는지는 한 번쯤은 확인하시는 것이 추후 발생하는 여러 가지 문제점들을 대처하는데 좋습니다.
구글검색노출 안될 때 해결 방법 및 조치 결과
지금까지 검색노출이 안되고 검색 인덱싱 처리가 안 되는 증상에 대해 원인 분석을 해보았습니다. 이러한 원인분석을 토대로 제가 문제점 해결을 위해 조치한 것들을 공유해 드리겠습니다.
1.사이트맵 삭제 및 재 등록
앞서 사이트맵 삭제 및 재 등록 결과 저 같은 경우는 증상이 해결되지 않았지만 실수로 사이트맵 설정을 변경하거나 처음부터 잘못 등록하신 분이시라면 사이트맵 삭제 및 재 등록 절차를 진행해 보시기 바랍니다.
자세한 사이트맵 삭제 및 등록 절차는 위 링크를 통해서 확인해 주시기 바랍니다.
먼저 구글 서치콘솔에 접속하고 왼쪽메뉴 사이트맵을 클릭합니다. 제출된 사이트맵에 이전에 등록한 사이트맵을 클릭해 줍니다. 티스토리를 사용하시거나 젯팩이나 기본 사이트맵을 사용하신 분들의 사이트맵 주소는 sitemap.xml 형태로 등록되어 있으며, 랭크매쓰, 요스트 seo 플러그인을 통해 사이트맵을 제출하신 분들은 sitemap_index.xml 주소로 된 사이트맵이 등록되어 있습니다.
▼등록된 사이트맵을 클릭하면 아래와 같은 화면이 나옵니다. 맨 위 상단 우측에 보면 점 세 개로 표기된 아이콘을 클릭하면 사이트맵 삭제 버튼이 나옵니다. 삭제 버튼을 클릭해서 삭제해 주시면 됩니다.
사이트맵 삭제를 하신 후에는 사이트맵 재등록을 진행해 주시기 바랍니다. 재등록이라고 해서 본인이 다시 사이트맵을 작성하는 방식이 아니라 서치콘솔에 사이트맵 주소를 다시 등록하는 절차를 의미합니다.
▼서치콘솔 사이트맵을 클릭합니다. 상단에 ‘새 사이트맵 추가’ 부분에 사이트맵 주소를 입력하고 제출버튼을 클릭하면 재 등록이 완료됩니다. 사이트맵 주소는 랭크매쓰의 경우 sitemap_index.xml을 입력, 티스토리나 잿팩 을 통해 진행하시게 되면 sitemap.xml을 입력해서 제출해 주세요.
사이트맵을 재 등록 하신 후에는 포스팅이 완료된 글 몇 개를 url검사를 통해 다시 색인신청 해보시기 바랍니다. 사이트맵이 새로 등록되어 수동으로 몇 개의 글을 색인 신청 해야지 좀 더 빠르게 색인이 진행됩니다.
2. Robot.txt 확인
가끔 robot.txt에 Disallow에 메인페이지나 카테고리 페이지 또는 post글들에 Disallow가 설정되어 있는 경우 색인이 되지 않게 됩니다. 한 번쯤은 점검해 보시기 바랍니다. robot.txt는 구글봇에게 내 사이트에서 어떤 부분은 액세스 하고 어떤 부분은 액세스 할 수 없다는 지침을 알려주는 역할을 합니다. 또한 내 사이트에서 어떤 사이트맵을 참조하라는 메시지도 포함되어 있습니다. 구글 크롤링할 때 일종의 지침을 내려주는 정보인 셈입니다.
robot.txt를 확인하는 방법에 대해서는 워드프레스 랭크매쓰 플러그인을 사용하시는 분 기준으로 설명드리겠습니다. 플러그인을 사용하지 않고 수동으로 하는 방법에 대해서는 다른 방법으로 알아보시기 바라며 별로 추천드리지 않습니다.
▼랭크매쓰=> 일반설정=> Robots.txt 편집에 들어가시면 아래 이미지와 같이 Robots.txt에 들어가 있는 텍스트를 확인하고 수정할 수 있습니다.
현재 제가 사용하고 있는 설정입니다. 가장 일반적인 설정이며 잘 모르시는 분들은 저와 같이 설정해 주시기 바랍니다. 단 사이트맵 주소부분에 본인의 도메인 주소를 입력해 주시기 바랍니다.
Disallow 액세스 할 수 없는 부분 표기이며 도메인 url다음 /주소를 입력하시면 됩니다. 예를 들어서 제 도메인이 https://abcd.com이고 제가 작성한 글 url이 https://abcd.com/efg이라면 제가 작성한 https://abcd.com/efg 글이 색인이 안되도록 즉 노출이 안되도록 설정하려면 Disallow부분에 /efg를 추가해 주시면 됩니다.
Allow부분은 Disallow 반대로 액세스 할 수 있는 부분입니다. Sitemap은 서치콘솔에 등록한 사이트맵 주소를 입력해 주시면 됩니다.
robot.txt 작성 순서도 아래와 같은 순서로 User-agent: *가 먼저 나타나고 순서대로 작성해 주시기 바랍니다.
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Sitemap: https://도메인url/sitemap_index.xml
3. 플러그인 정리
마지막으로 플러그인 정리입니다. 이번기회를 통해 제가 사이트맵 생성이 지원되는 플러그인을 2개 사용하고 있는 것을 확인했습니다. 젯팩플러그인을 통해 sitemap.xml 사이트맵 주소를 생성해서 사용 중이였고, 랭크메쓰를 통해 sitemap_index.xml 사이트맵 주소를 같이 사용 중이였습니다.
사이트맵 중복 사용은 크게 문제가 되지 않지만 플러그인끼리 충돌이 발생할 수 있다는 의견이 있어서 젯팩플러그인 사이트맵 설정을 중지하였습니다. 그리고 통계 목적으로 젯팩을 사용했는데 젯팩이 상당히 무거운 플러그인이어서 이번 기회에 삭제를 진행했습니다.
무거운 플러그인이나 불필요한 플러그인들이 많게 되면 사이트 로딩 속도 저하 문제가 발생하니 반드시 불필요한 플러그인들은 정리해 주시기 바랍니다. 실제로 구글에서 나온 정책 문서에도 사이트 속도 저하 문제는 사이트 순위 하락 및 노출 누락의 원인이 된다고 명시되어 있습니다.
구글 검색 핵심 업데이트 진행
가장 근본적인 원인이자 해결 방법을 알 수 있는 사항입니다. google은 일 년에 검색 알고리즘과 시스템 업데이트를 진행합니다. 2023년도에는 8월 말에 핵심 업데이트가 진행되었고 핵심 업데이트를 진행하면서 제 사이트가 저 품질 평가를 받아 노출이 안 되는 것 같습니다. 안타깝게도 구글에서는 핵심 업데이트를 통한 조치에 대해 사이트마다 원인이 무엇인지 알려주지 않습니다.
핵심 업데이트 전만큼 실적이 나오지 않더라도 페이지에는 문제가 없습니다.
핵심업데이트 후 변경사항이 발생한 페이지에는 해결해야 할 문제가 없습니다.
이러한 변경사항은 이전에 저평가받았던 일부 페이지에서 검색결과의 실적을 높이기도 합니다.
대규모 핵심 업데이트는 대부분 몇 개월마다 이루어집니다.
핵심 업데이트에 의해 영향을 받은 콘텐츠는 다음번 대규모 핵심 업데이트가 출시되기 전까지 복구되지 않습니다.
-구글검색센터 핵심 업데이트 문서 일부-
위와 같이 구글 핵심 업데이트 내용은 현재 발생하고 있는 구글 노출 안 되는 증상에 다 적용이 됩니다. 페이지엔 문제가 없지만 즉 색인은 되었지만 노출시켜주지 않는다. 하지만 다음번 업데이트가 진행되기 전까지는 복구되지 않는다 라는 의미입니다.
구글 핵심 업데이트 전문을 보시려면 아래 링크를 통해 확인하시기 바랍니다.
다행인지는 모르지만 핵심 업데이트가 몇 개월에 걸쳐서 진행된다고 하니 그동안 문제가 될만한 글들을 손보고 사이트 속도 최적화를 진행하고 꾸준히 중복되지 않는 독창적인 글들을 써야겠다는 생각이 듭니다.
지금까지 내용정리입니다.
- 구글검색노출 원인은 구글 핵심업데이트 때 내 사이트가 저품질로 평가되었기 때문이다.
- 해결하기 위해 다음 업데이트가 진행되기까지 양질의 글을 꾸준히 발행한다.
- 이미 발행한 글들을 점검한다. 제휴광고글이나 중복된 콘텐츠는 없는지 확인한다.
- 불필요한 플러그인들을 삭제한다.
- 사이트맵을 삭제하고 새로 등록해 준다.(필요한 분들만 진행해 주세요)
- 보안플러그인이 설치되어 있지 않다면 워드프레스 보안플러그인을 설치한다.
- Robot.txt를 점검해 본다.
비슷한 증상으로 고민이 많으신 분들께 작은 도움이라도 되셨길 바라며 글을 마칩니다.
이후 진행되는 사항에 대해서는 계속 업데이트하도록 하겠습니다.
감사합니다.
