구글 - http://www.google.com/robots.txt
네이버 - http://search.naver.com/robots.txt
http://kin.naver.com/robots.txt
엠파스 - 안 나옴.
야후 - http://www.yahoo.com/robots.txt
네이트 - 안 나옴.
라이코스 - http://www.lycos.com/robots.txt
다음 - http://www.daum.net/robots.txt
블로그 ----
이글루스 - http://www.egloos.com/robots.txt
블로그인 - http://www.blogin.com/robots.txt
블로거 - http://www.blogger.com/robots.txt
그 외 -----
마이크로하며 소프트한 곳 - http://www.microsoft.com/robots.txt
네이버가 제일 짠 듯.
네이버 - http://search.naver.com/robots.txt
http://kin.naver.com/robots.txt
엠파스 - 안 나옴.
야후 - http://www.yahoo.com/robots.txt
네이트 - 안 나옴.
라이코스 - http://www.lycos.com/robots.txt
다음 - http://www.daum.net/robots.txt
블로그 ----
이글루스 - http://www.egloos.com/robots.txt
블로그인 - http://www.blogin.com/robots.txt
블로거 - http://www.blogger.com/robots.txt
그 외 -----
마이크로하며 소프트한 곳 - http://www.microsoft.com/robots.txt
네이버가 제일 짠 듯.
공유하기 버튼
|
|
덧글
지로 2005/04/30 15:53 # 답글
방학때 다니던 회사가 네이버 지식검색 로봇 만든데였는데... 네이트도 거기서 만든거 같고.teslaMINT 2005/04/30 18:45 # 답글
네이트가 예전에는 구글 검색을 이용했죠.