페이지 색인 생성 문제 - robots.txt에 의해 차단됨

 

 

블로그를 운영하다 보니, 생각치도 않은 다양한 이슈 메일들을 접하게 되네요.

어제 받은 메일인데, 

인터넷에 있는 유용한 관련 블로그들을 검색해보고, 특별한 이슈가 아님을 확인했습니다. 

 

요약하면,

페이지 색인 생성 문제 해결하기로 들어가면,

Google Search Console의 색인 - 색인 생성 범위로 들어가는데,

블로그 url 뒤에 manage, search에 대해 크롤링 오류가 발생한 것은 무시해도 됩니다. 

해당 페이지들은 관리용 페이지들이기 때문에 크롤링 대상이 아니기 때문입니다. 

 

오늘도 하나 배웠네요. 감사합니다. 

 

 

참고 자료

 

(웅카콜라) "색인이 생성되었으나 robots.txt에 의해 차단됨" 1분 해결 방법 (tistory.com)

(웅카콜라) "색인이 생성되었으나 robots.txt에 의해 차단됨" 1분 해결 방법