구글 블로그 스팟 네이버 서치어드바이저 색인 문제
오늘은 구글에도 블로그 스팟이라고 있습니다. 네이버도 네이버 블로그가 있듯이 구글도 블로그 스팟이라는 것을 만들어서 무료로 사용하도록 서비스 하고 있습니다. 근데 중에서 네이버 서치 어드바이저에서 웹사이트 웹마스터 도구죠. 여기에서 웹사이트에 승인 요청을 할 때 승인 요청이 잘 안된다 해서 네이버 쪽을 포기하시는 이런 분들이 계십니다. 흔히 구글 블로그 스팟의 좋은 점은 robots.txt 파일입니다. 마음대로 맞춤형으로 가공 제작을 해서 할 수가 있어요. 유용하게 쓸 수 있는 부분이 있습니다.워드 프레스를 사용하시는 분들도 네이버에서 왜 색인이 안 되냐라는 이 부분들이 있으실 겁니다. 제가 볼 때는 robots.txt 이 파일에 따라서 공통적으로 문제점이 있었었는데 이 부분에 대해서 저도 있었고 그런데 이것에 대해서 몇몇 가지 데이터를 확인을 했고 대해서 말씀드리도록 하겠습니다.
구글 블로그 스팟 네이버 서치어드바이저 문제
색인요청을 해도 안먹힌다... 이유는 뭘까요? 첫 번째로 구글 블로그 스팟에서 서치 어드바이저 네이버 거죠. 문제점이 있었습니다.이 문제점이 색인 요청을 일간 50개의 웹페이지를 제출하도록 돼 있어요. 네이버 서치 어드바이저를 바탕으로 말이죠. 그렇지만 제가 한 2주 동안 계속 웹사이트에 수집 요청을 보냈음에도 불구하고 처리 결과는 요청 완료로만 뜨고 실제로 네이버 로봇인 Yeti 가 수집을 하지는 않은거죠. 수집을 하지 않으니까 아무리 site: 으로 해서 제 블로그 스팟 주소를 네이버에 검색 결과에서 찾아보더라도 전혀 나오지 않는 이 상한 현상이 계속 보여서 이것을 한 번 확인해보고자 했습니다.
구글 블로그 스팟 robots.txt 파일
두 번째가 바로 제가 만들었던 구글 블로그 스팟 robots txt 파일입니다. 이 파일을 보시면 아시겠지만 모든 검색 엔진에 크롤러들이 들어와서 크롤링 할 수 있도록 만들어놨어요.그런데 이 밑에 네이버 검색 로봇도 뭔가 들어와서 너도 크롤링 할 수 있도록 이것만 만들어 놨습니다.그래서 결과론적으로는 문제가 터였던 거예요. 그게 문제가 됐었던 겁니다.
보통은 지금 제가 나와 있었던 robots txt 파일이 거의 구글 블로그 스팟 에서 기본적으로 디폴트로 제공하는 robots txt 파일이거든요. 근데 이 파일로 들어가면은 이상하게도 네이버 서치 어드바이저에서 네이버 검색 엔진 로봇인 Yeti가 말을 안 듣습니다.색인이 안 되는 거예요. 그래서 참 특이했었던 부분입니다. 해서 이 부분에 대해서 흔히 말하면 구글 블로그 스팟을 통해서 양질의 콘텐츠를 만드셨던 분들이 많 이 놓치고 있었던 부분이었다는 알 수 있었고. 제가 robots txt 파일을 웹사이트 검색에 색인 될 수 있도록 했었던 robots txt 파일을 수차례 시도했지만 결국 네이버 검색 결과에서 실제로 블로그 스팟 에서 색인 됐었던 사이트 robots. txt 파일은 바로 아래에서 보실 수 있습니다.
네이버 검색에 색인된 구글 블로그 스팟 robots.txt 는 뭘까?
확신 가지고 믿으셔도 됩니다.모든 검색 엔진은 다 allow 처리가 되도록 만드셔야 됩니다. 아래 이미지와 같이 모든 검색 엔진이 다 와서 크롤링 할 수 있도록 robots txt 파일로 만들어 주셔야 되는 거고요. 실제로 네이버 웹사이트에 나의 양질의 구글 블로그 스팟을 노출할 수 있습니다. 이렇게 안 해 놓으면 실제로 노출이 안 됩니다. 거의 제가 지금 여러 가지 테스트를 해봤었지만 실제로 해보셨던 결과는 아래와 같은 robots txt 파일을 수정만 해주시면 해결이 됩니다. 제가 요 밑에 메모장 파일을 제가 넣어놨습니다. 그거를 참고를 하셔서 그거를 고스란히 복사 붙여넣기 해주시면 됩니다.
네이버 웹사이트에 구글 블로그 스팟 색인 문제 해결
robots.txt 파일을 User- Agent : * Allow : / 형식으로 바꿔서 제출해야된다.
네이버 웹사이트에 구글 블로그 스팟 색인 해결 방법
구글 블로그 스팟 내 Setting 에 들어가서 크롤러 및 색인 생성, 맞춤 robots.txt 사용 설정 밑에 맞춤 robots.txt을 아래와 같이 바꿔준다. 그럼 최종 해결 끝
마지막으로 해결 방법은 구글 블로그 스팟 내 세팅 메뉴에 들어가서 밑으로 마우스를 내려 다 보시면 크롤러 그다음 및 색인 생성 이 부분이 있습니다. 밑에 메뉴에 맞춤 로봇 txt 사용 설정이 있고 밑에 맞춤 로봇 txt 메뉴가 있습니다. 그거를 선택을 하시면 넣어야 될 공란이 있습니다. 그 때 제가 파일 올려놨었던 robots txt 파일 복사 붙여놓기로 넣으셔서 움직이시면 됩니다.
그리고 다시 네이버 서치 어드 와이저에 들어가셔서 검증에서 robots txt 부분만 검증해 보시면 됩니다. 그리고 웹사이트에 실제로 되는가 부분만 확인만 해주시면 끝나요. 만약에 해결이 안 되신 다 했으면 저한테 말씀 주십시오. 그러면 제가 이 부분만큼은 뚫어서 뭔가 해결해 줄 수 있는 왜냐하면 네이버는 매우 큰 검색 엔진이죠.
웹사이트 영역의 노출 빈도가 이전과는 상상도 다르게 엄청나게 커졌습니다. 이게 웹사이트에 개방하는 거를 얘네들이 과거보다 이 영역을 엄청 키웠었기 때문에 우리는 이 기회를 놓쳐서는 안 되는 거죠. 그렇기 때문에 오늘 이것을 바탕으로 해서 여러분들께 말씀드리고자 해서 전달드리게 됐습니다. 혹시 안 되시면 편하게 밑에다가 댓글 달려주시고 메일 달려주시고 하시면 제가 그걸 보고 참작을 해서 소폭이나마 도움을 드리도록 하겠습니다. 오늘은 여기까지입니다. 감사합니다.
'디지털마케팅' 카테고리의 다른 글
| [파이썬] 네이버 블로그 동영상 다운로드 방법 (0) | 2022.12.19 |
|---|---|
| [네이버 블로그] 발행 오류 ID당 글 방행기준을 초과하여 글 발행이 잠시 제한됩니다. 오류 해결 (0) | 2022.12.03 |
| 구글 블로거 블로그스팟 We're sorry, but one or more limits for the requested action have been exceeded. 오류 문제 해결 (0) | 2022.10.17 |
| [GDS] 구글 데이터 스튜디오 티스토리 구글 서치 콘솔 연동 연결 방법 (0) | 2022.10.12 |
| [Bing] 빙 웹마스터 도구 티스토리 검색 등록 및 색인 사이트맵 제출 확인 (1) | 2022.09.25 |
댓글