Google 웹 마스터 도구 내 사이트 맵을 수락하지 않는

Question

며칠 전에 나는 당신이 아래에 찾아 내 웹 사이트에 대한 robots.txt를 설정

Sitemap에 액세스하는 동안 오류가 발생했습니다. Sitemap이 Google의 가이드 라인을 준수하는지 확인하고 제공된 위치에서 액세스하여 다시 제출하십시오.

내가이 회신을 받았는데도 얻을 : robots.txt에 의해 제한

URL을 지금은 웹 마스터에 내 사이트 맵을 제출 할 수있는

?

Answer 1

robots.txt는 루트 (/, 예 : http://example.com/)를 제외한 모든 URL에 액세스 할 수 없도록합니다. 봇은 (귀하의 robots.txt 당) 사이트 맵을 크롤링 할 수 없습니다.

Allow 행을 추가 할 수 있지만 (아래처럼) 일반적으로 홈페이지를 제외한 모든 페이지를 크롤링하지 않으면 사이트 맵을 가질 필요가 없습니다.

User-agent: * 
Allow: /$ 
Allow: /sitemap.xml$ 
Disallow:/

(그들은이 기록 안에 허용되지 않기 때문에 나는 빈 줄을 제거했습니다.)

주 당신도 link your sitemap from the robots.txt 수 있습니다.