Google CSE 만 허용하고 ROBOTS.txt에서 Google 표준 검색을 허용하지 않습니다.

Question

Google 맞춤 검색 엔진을 사용중인 사이트가 있습니다. Google CSE가 내 사이트를 크롤링하기를 원하지만 일반 Google 검색 결과에 머물러 있기를 바랍니다. 난 내가 구글 CSE가 설정

User-agent: * 
Disallow:/

나는 구글 CSE의 로봇도 로봇을 순종해야 추측에 크롤링 원하는 페이지를 지정된 이후 구글 CSE의 봇을 무시합니다 바라고 내 robots.txt 파일에 넣고. txt. 그래서 내 페이지가 검색 엔진 검색에서 벗어나지 만 Google CSE에서 색인을 생성 할 수있는 방법이 있습니까? 티아!

Answer 1

당신이 원하는 것과 맞는이 질문에 대한 해결책이 없습니다. 나도 맞춤 검색이 필요한 상황과 동일한 상황에 처해있다. 불행히도 Google의 crawlers 목록에는 Google 맞춤 검색을위한 특정 봇이 표시되지 않습니다. Googlebot을 차단하면 기본 검색과 맞춤 검색이 모두 중단됩니다.