Default - All Robots are

Crawl-Delay

网站地图

如果没有，请留空。

搜索机器人：

Google
Google Image
Google Mobile
MSN Search
Yahoo
Yahoo MM
Yahoo Blogs
Ask/Teoma
GigaBlast
DMOZ Checker
Nutch
Alexa/Wayback
Baidu
Naver
MSN PicSearch

禁止文件夹

路径是相对于根目录的，并且必须包含斜杠“/”。

关键词密度检测器

信用卡生成器

信用卡验证器

Robots.txt 生成器