umbraco 용 Robots.txt

Question

Umbraco (7.5) 웹 사이트의 기본 Robots.txt가 있는지 궁금합니다. 지금은이 항목들로 생성했습니다. 내가 다른 것을 더 할까?

User-Agent: * 
Disallow: /umbraco/ 
Disallow: /umbraco_client/ 
Disallow: /css 
Disallow: /Errorpages/ 
Disallow: /scripts/ 
Disallow: /Config/ 

Answer 1

나는 JSS가이를 확인이

Sitemap: https://{HTTP_HOST}/sitemap.aspx 
User-agent: * 
Disallow: /aspnet_client/ 
Disallow: /bin/ 
Disallow: /config/ 
Disallow: /css/ 
Disallow: /data/ 
Disallow: /install/ 
Disallow: /masterpages/ 
Disallow: /python/ 
Disallow: /scripts/ 
Disallow: /umbraco/ 
Disallow: /umbraco_client/ 
Disallow: /usercontrols/ 
Disallow: /xslt/ 

Answer 2

목록에서/css 및/scripts를 실제로 제거하는 것이 좋습니다. 나는 Google이 그것을 이용할 수있는 사람들에게 더 우호적 인/더 좋다고 생각한다.

그렇지 않으면 예방 차원에서/install /을 입력하는 것이 좋습니다. https://yoast.com/dont-block-your-css-and-js-files/ :

Answer 3

에 관한 CSS &를 사용하여 종료했습니다. 나는 최근에 그들을 잘라 내기로 결정했다. 항상 Umbraco 인스턴스와 함께 사용

광산, robots.txt에 파일은 다음과 같습니다 :

# robots.txt for Umbraco 
User-agent: * 
Disallow: /aspnet_client/ 
Disallow: /bin/ 
Disallow: /config/ 
Disallow: /data/ 
Disallow: /install/ 
Disallow: /macroScripts/ 
Disallow: /masterpages/ 
Disallow: /umbraco/ 
Disallow: /umbraco_client/ 
Disallow: /usercontrols/ 
Disallow: /xslt/ 
User-agent: Libwww-perl 
Disallow:/
Sitemap: http://{HTTP_HOST}/sitemap