robots.txtではなくて、humans.txtというのを初めて知った。

関わった人間を宣言しておくフォーマットなのかー
http://humanstxt.org/JA