Alguem ja usou Robots?

Boa tarde galera, vocês já devem ter ouvido falar de Robots, eles orientam os sites de busca, o que preciso saber é como usar esses Robots e onde encontrar um arquivo desses, obrigado pela ajuda!