Googleには、webスパイダーでインデックスを作成できないすべてのパスのリストを含む
robots.txtファイルがあり
ます 。 しかし、Googleがボットとアルゴリズムだけではないことを示しようとしている
humans.txtファイルもあります。
「Googleは多数の開発者、デザイナー、研究者、ロボットなどによって構築されています。 世界中のさまざまな場所で。 多数のツールとテクノロジーを使用して継続的に更新および構築されます。 サポートをご希望の場合は、google.com / jobsをご覧ください。
GoogleのTim Brayは、このテキストファイルを
Google Jobsのtwitterアカウントに
リンクして、人気を高めました。
Youtubeの
robots.txtファイルに、ユーモラスなコメントが最近追加されました。