# All robots will spider the domain

User-agent: *
Disallow: links.php
Disallow: /dir/guides.htm
Disallow: /dir/hotels.htm
Disallow: /dir/directories.htm
Disallow: /dir/real-estate.htm
Disallow: /fr/liens.php
Disallow: /fr/liens2.php
Disallow: /fr/liens_annu.htm
Disallow: /fr/dir/annuaires.php
Disallow: /fr/dir/autres.php
Disallow: /fr/dir/guides.php