Deixa-ho en blanc si no el tens.

Google
Google Image
Google Mobile
MSN Search
Yahoo
Yahoo MM
Yahoo Blogs
Ask/Teoma
GigaBlast
DMOZ Checker
Nutch
Alexa/Wayback
Baidu
Naver
MSN PicSearch

La ruta és relativa a l'arrel i ha de contenir una barra inclinada "/" al final.

Generador de robots.txt