Default - All Robots are

Crawl-Delay

网站地图

如果没有，请留空。

搜索机器人：

Google
Google Image
Google Mobile
MSN Search
Yahoo
Yahoo MM
Yahoo Blogs
Ask/Teoma
GigaBlast
DMOZ Checker
Nutch
Alexa/Wayback
Baidu
Naver
MSN PicSearch

禁止文件夹

路径是相对于根目录的，并且必须包含斜杠“/”。

我的屏幕分辨率

屏幕分辨率模拟器

我的用户代理

JavaScript 缩小器

Robots.txt 生成器