Default - All Robots are

Crawl-Delay

网站地图

如果没有，请留空。

搜索机器人：

Google
Google Image
Google Mobile
MSN Search
Yahoo
Yahoo MM
Yahoo Blogs
Ask/Teoma
GigaBlast
DMOZ Checker
Nutch
Alexa/Wayback
Baidu
Naver
MSN PicSearch

禁止文件夹

路径是相对于根目录的，并且必须包含斜杠“/”。

查找FacebookID

JavaScript 缩小器

元标签生成器

我的浏览器是什么

Robots.txt 生成器