|
|
|
|
|
질문과 답변
|
|
|
* 매뉴얼과 자주 묻는 질문을 먼저 확인 하시고, 질답 게시판에서 검색후 질문바랍니다.
* 질문시에는 자신의 계정 아이디와 홈주소를 필히 남겨주시기 바랍니다.
* 에러로 인한 문의시 에러메세지를 필히 함께 남겨주시기 바랍니다.
* 질답 게시판은 공개게시판으로 계정 비밀번호 정보를 남기시면 안됩니다.
|
| Read No. 41107 article |
2023-11-21 17:40:30 |
|
|
|
|
| NickName |
hyac [홈페이지] |
| Subject |
구글크롤러가 robots.txt을 가져오지 못합니다 |
|
|
대략 서너 달? 전부터 그런 것 같고 지금도 마찬가지입니다.
사이트에는 robots.txt 이 올라가 있는데 있는데 구글 콘솔 테스터에서 확인하면 가져올 수 없다고 합
니다.
https://support.google.com/webmasters/thread/184648977/%ED%95%B4%EA%B2%B0%EB%90%A8-url-
%EC%8B%A4%EC%8B%9C%EA%B0%84-%EA%B2%80%EC%82%AC-%EC%A7%84%ED%96%89-%EC%8B%9C-%EC%8B%A4%ED%8C%A8-
robots-txt%EB%A5%BC-%EC%B0%BE%EC%9D%84-%EC%88%98-%EC%97%86%EC%9D%8C-%EC%9C%BC%EB%A1%9C-
%EA%B5%AC%EA%B8%80%EC%97%90%EC%84%9C-%ED%81%AC%EB%A1%A4%EB%A7%81%EC%9D%84-%ED%95%98%EC%A7%80-
%EB%AA%BB%ED%95%98%EA%B3%A0-%EC%9E%88%EC%8A%B5%EB%8B%88%EB%8B%A4?
hl=ko&sjid=10476990795455314036-AP
구글 서포트 페이지를 찾아봤는데 같은 증상을 겪는 중에 호스트 업체에서 구글 크롤링의 IP대역과 통
신이 원활하지 않은걸 확인하여
방화벽 등을 점검하여 통신이 원활하도록 수정하여 해결되었다는 글이 있었습니다.
혹시 구글크롤러가 홈페이지에 접근이 되는지 확인 가능할지요?
크롤러 IP대역은 다음 페이지 등에서 확인 할 수 있는 것 같습니다.
https://developers.google.com/search/docs/crawling-indexing/verifying-googlebot?
visit_id=638052198627390520-4170590984&rd=1
[ 관련글 ]
|
|
|
Page Loading [ 0.25 Sec ]
SQL Time [ 0.23 Sec ]
|
|
|
Re: 구글크롤러가 robots.txt을 가져오지 못합 