protocole HTTP, entête, user-agent, if-modified-since

Ce site propose de découvrir l'univers des headers http et des bizarreries du web en général.

Savez-vous par exemple que lorsque vous naviguez sur internet, vous donnez aux sites que vous visitez des informations sur votre ordinateur et sur le navigateur que vous utilisez ? Pour en savoir plus, découvrez le monde bizarre des "user agents"

Apprenez ce que veut dire: 007ac9-crawler, 360-cn-agent, 360spider, acheetahi, adnormcrawler, advbot

Découvrez la notion de fichier "robots.txt" et comment les différents sites internet l'utilisent, de façon plus ou moins judicieuse:

  • 1 e cigarette: www.1e-cigarette.fr / robots.txt
  • 1 s: sansretour.1s.fr / robots.txt
  • 1 k: sunantilles-infos.1k.fr / robots.txt
  • 01 diagimmo: 01diagimmo.fr / robots.txt
  • 01 telechargement: 01telechargement.fr / robots.txt
  • 1001 oprestige: www.1001oprestige.fr / robots.txt
  • 0 rg: dupuy-photographe.0rg.fr / robots.txt
  • 205 cgti: www.205cgti.fr / robots.txt
  • 123: www.dbkarting.123.fr / robots.txt
  • 1001 pa: 72.1001pa.fr / robots.txt
  • 1 tpe: boutic.caro49.1tpe.fr / robots.txt
  • ab fenetre 34: www.ab-fenetre-34.fr / robots.txt
  • ac rouen: bartholdi-lyc.spip.ac-rouen.fr / robots.txt
  • © 2025 www.http-header.com — cookies