サクサク読めて、アプリ限定の機能も多数!
wikipediaのは自動生成ページだからという面もありそうだ。
deep_one のブックマーク 2013/04/11 15:07
大手サイトのrobots.txtでわかる「検索でヒットされたくないページ」の特徴wikipediaのは自動生成ページだからという面もありそうだ。2013/04/11 15:07
このブックマークにはスターがありません。 最初のスターをつけてみよう!
www.geek.sc2013/04/10
robots.txtとは robots.txtは、検索エンジンのクローラー(bot)に、クロールされたいページや、クロールされたくないページを教えるテキストファイルのことです。多くの検索エンジンのクローラーは、そのドメイ...
272 人がブックマーク・29 件のコメント
\ コメントが サクサク読める アプリです /
wikipediaのは自動生成ページだからという面もありそうだ。
deep_one のブックマーク 2013/04/11 15:07
このブックマークにはスターがありません。
最初のスターをつけてみよう!