0
거기에 webservice에 사용되는 링크를 크롤링하지 않도록 googlebot을 만들 수있는 방법이 있습니까? URL에 내 webservice에 액세스하려고하면 매개 변수가 전달되지 않으면 500 오류가 반환됩니다. 또는 URL없이 매개 변수없이 웹 서비스에 액세스하려고하면 http 500 오류를 방지하는 방법이 있습니까?googlebot 크롤링 웹 서비스
THanks.
거기에 webservice에 사용되는 링크를 크롤링하지 않도록 googlebot을 만들 수있는 방법이 있습니까? URL에 내 webservice에 액세스하려고하면 매개 변수가 전달되지 않으면 500 오류가 반환됩니다. 또는 URL없이 매개 변수없이 웹 서비스에 액세스하려고하면 http 500 오류를 방지하는 방법이 있습니까?googlebot 크롤링 웹 서비스
THanks.
robots.txt를 만들려면 here을보세요.
빠른 답장을 보내 주셔서 감사합니다. 또한 jquery ajax를 통해 webservice를 호출하면 robots.txt에 webservice를 넣을 수 있을지 궁금해하며 googlebot이 스크립트의 링크를 크롤링하지 못하게할까요? 죄송합니다.이 서재응에게는 좋지 않습니다. –
robots.txt를 사용하면 크롤링 할 URL을 결정할 수 있습니다. 따라서 webservice.php? param1 = 123 & param2 = 456을 호출하고 webservice.php를 크롤링해서는 안되는 robots.txt를 넣은 index.php 페이지가 있으면 webservice가 아닌 index.php를 크롤링합니다. php. – bartlaarhoven
쿨, 고마워. –