Googlebot이 만든 WordPress 웹 사이트를 크롤링하고 색인을 생성 할 수없는 이유를 모르겠습니다. 이것은 내가 내 robots.txt를 위해 무엇을 가지고 :Google 로봇이이 robots.txt를 크롤링 할 수없는 이유는 무엇입니까?
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-login.php
Disallow: /wp-content/
Disallow: /content/
Allow: /content/uploads/
사이트가 크롤링되지 않는다고 생각하는 이유는 무엇입니까? Google이 새로운 사이트를 감지하는 데 시간이 걸립니다 (특히 어디에서 연결되지 않은 경우). http://www.google.co.uk/submityourcontent/tools.html#web을 통해 크롤링 요청을 제출할 수 있지만 주변에 도달하기까지 시간이 걸릴 수도 있습니다. – Mawg
일주일이 지났습니다. 나는 기다리고 있었고, 기다리고 있었다. .. 나는 내가 더 기다릴 많은 것을 할 것이다 고 생각한다. 나는 그것이 며칠의 문제라고 생각했다. 감사. –
아, 그러면 도메인을 검색 할 때 Google에서 robots.txt의 규칙 때문에이 웹 사이트의 콘텐츠를 색인 생성 할 수 없다고 말합니다. 이것이 내가 혼란스러워하는 이유입니다. 그게 다야. –