Googleによるrobots.txtやmeta要素の扱いをまとめた文書。

hiro_y のブックマーク 2011/02/06 22:53

<blockquote class="hatena-bookmark-comment"><a class="comment-info" href="https://b.hatena.ne.jp/entry/26801395/comment/hiro_y" data-user-id="hiro_y" data-entry-url="https://b.hatena.ne.jp/entry/code.google.com/intl/ja/web/controlcrawlindex/" data-original-href="http://code.google.com/intl/ja/web/controlcrawlindex/" data-entry-favicon="https://cdn-ak2.favicon.st-hatena.com/64?url=https%3A%2F%2Ffanyv88.com%3A443%2Fhttp%2Fcode.google.com%2Fintl%2Fja%2Fweb%2Fcontrolcrawlindex%2F" data-user-icon="/users/hiro_y/profile.png">Controlling Crawling and Indexing - Google Code</a><ul class="comment-tag" style="list-style: none; margin: 0px;"><li style="float: left">[<a href="https://b.hatena.ne.jp/q/google">google</a>]</li><li style="float: left">[<a href="https://b.hatena.ne.jp/q/search">search</a>]</li></ul><br><p style="clear: left">Googleによるrobots.txtやmeta要素の扱いをまとめた文書。</p><a class="datetime" href="https://b.hatena.ne.jp/hiro_y/20110206#bookmark-26801395"><span class="datetime-body">2011/02/06 22:53</span></a></blockquote><script src="https://b.st-hatena.com/js/comment-widget.js" charset="utf-8" async></script>

このブックマークにはスターがありません。
最初のスターをつけてみよう！

Controlling Crawling and Indexing - Google Code

code.google.com2010/11/25

Automated website crawlers are powerful tools to help crawl and index content on the web. As a webmaster, you may wish to guide them towards your useful content and away from irrelevant content. Th...

15 人がブックマーク・4 件のコメント

他のコメントを読む

＼コメントがサクサク読めるアプリです／

はてなブックマーク

Controlling Crawling and Indexing - Google Code

はてなブックマーク

公式Twitter

はてなのサービス