국내 포탈들도 robots.txt를 지켜주십시오.

2006-01-20

구글과 국내 포탈의 robots.txt 정책에 대한 관점의 차이가 최근 블로그에서 거론되고 있습니다.

robots.txt가 법률적인 강제 조항이 아니기 때문에 사람에 따라 지켜도 그만 안 지켜도 그만이라고 받아들여질지도 모르겠습니다.

그러나 구글은 robots.txt를 지키는 것이 그들이 말한 “Don’t be evil.”을 지키는 것이라고 하는 것을 보면 적어도 구글은 robots.txt를 어기는 것이 악한 행동이라고 생각하나 봅니다.

요즘 유행하는 집단 지성이라는 이론이 맞는다면 현재로는 집단 지성이 구글의 이런 생각을 옳다고 말하고 있습니다.

저는 국내 포탈들도 robots.txt에 따라줬으면 합니다.