Liste des fichiers demandés par un agent utilisateur

On connaît la chanson :

Le Favicon.ico, petit fichier image à placer à la racine de son arborescence, qui apparaît dans la barre d'adresse du navigateur web
Le Robots.txt, petit fichier texte à placer à la racine du site, qui énumère certains droits de visite par rapport aux identités déclarées
Les éventuels fichiers de vérification demandés par les robots des moteurs de recherche
D'autres fichiers comme des vignettes (thumbnails) de votre site, utilisés par certains annuaires...

Ne pas placer ses fichiers sur votre serveur n'est pas vraiment pénalisant en soi, mais va quand même générer dans la plupart des cas des demandes de la part des agents utilisateurs, selon leur type (le navigateur appelera le favicon, le robot demandera le fichier texte).

Bien entendu, selon les configurations du serveur qui heberge vos pages web, les fichiers de départ sont requis, qui peuvent se nommer index, home, default... dans toutes les extensions dynamiques (.php, .asp, .cfm...) mais aussi statiques (.html, .htm, .txt...)

Sans quoi vous risquez de vous retrouver avec une réponse de type Erreur 404 page introuvable :

Not Found
The requested URL /admin/secret/passwords.txt was not found on this server.

Additionally, a 404 Not Found error was encountered while trying to use an ErrorDocument to handle the request.