B / Y / U / S
HOME 웹 호스팅 도메인 매뉴얼 고객지원 설정정보 계정신청 2025-05-25 Sunday 
웹 호스팅
# 공지 사항
# 자주 묻는 질문
# 질문과 답변
# 가입 문의
커뮤니티
# 자유게시판
# 리눅스팁
# 아이큐 테스트
# 내홈 소개
# 겔러리
# 자료실

  질문과 답변
* 매뉴얼자주 묻는 질문을 먼저 확인 하시고, 질답 게시판에서 검색후 질문바랍니다.
* 질문시에는 자신의 계정 아이디홈주소를 필히 남겨주시기 바랍니다.
* 에러로 인한 문의시 에러메세지를 필히 함께 남겨주시기 바랍니다.
* 질답 게시판은 공개게시판으로 계정 비밀번호 정보를 남기시면 안됩니다.
Read No. 41107 article 2023-11-21 17:40:30
NickName   hyac [홈페이지]
Subject   구글크롤러가 robots.txt을 가져오지 못합니다
대략 서너 달? 전부터 그런 것 같고 지금도 마찬가지입니다.

사이트에는 robots.txt 이 올라가 있는데 있는데 구글 콘솔 테스터에서 확인하면 가져올 수 없다고 합
니다.

https://support.google.com/webmasters/thread/184648977/%ED%95%B4%EA%B2%B0%EB%90%A8-url-
%EC%8B%A4%EC%8B%9C%EA%B0%84-%EA%B2%80%EC%82%AC-%EC%A7%84%ED%96%89-%EC%8B%9C-%EC%8B%A4%ED%8C%A8-
robots-txt%EB%A5%BC-%EC%B0%BE%EC%9D%84-%EC%88%98-%EC%97%86%EC%9D%8C-%EC%9C%BC%EB%A1%9C-
%EA%B5%AC%EA%B8%80%EC%97%90%EC%84%9C-%ED%81%AC%EB%A1%A4%EB%A7%81%EC%9D%84-%ED%95%98%EC%A7%80-
%EB%AA%BB%ED%95%98%EA%B3%A0-%EC%9E%88%EC%8A%B5%EB%8B%88%EB%8B%A4?
hl=ko&sjid=10476990795455314036-AP

구글 서포트 페이지를 찾아봤는데 같은 증상을 겪는 중에 호스트 업체에서 구글 크롤링의 IP대역과 통
신이 원활하지 않은걸 확인하여
방화벽 등을 점검하여 통신이 원활하도록 수정하여 해결되었다는 글이 있었습니다.

혹시 구글크롤러가 홈페이지에 접근이 되는지 확인 가능할지요?
크롤러 IP대역은 다음 페이지 등에서 확인 할 수 있는 것 같습니다.

https://developers.google.com/search/docs/crawling-indexing/verifying-googlebot?
visit_id=638052198627390520-4170590984&rd=1

[ 관련글 ]


41107 구글크롤러가 robots.txt을 가져오지 못합니다  hyac  2023.11.21  ..319 
  답장 Re: 구글크롤러가 robots.txt을 가져오지 못합  풀비누  2023.11.21  ..371 
  답장 Re^2: 구글크롤러가 robots.txt을 가져오지   hyac  2023.11.21  ..354 
Regist Addr [ 203.246.179.174 ] 목록보기 윗글 아랫글 글쓰기 답장쓰기 수정 삭제
정규표현식 [ 상세 검색 ]
Page Loading [ 0.35 Sec ] SQL Time [ 0.33 Sec ]

Copyleft 1999-2025 by JSBoard Open Project
Theme Designed by IDOO And follow GPL2

개인정보 취급방침 이용 약관 사이트 맵 어드민 관리