User-agent:*
# Indique aux robots qu'ils ne peuvent indexer les fichiers contenus dans les répertoires
Disallow:/cgi-bin/
Disallow:/pub/