Ce site propose de découvrir l'univers des headers http et des bizarreries du web en général.
Savez-vous par exemple que lorsque vous naviguez sur internet, vous donnez aux sites que vous visitez des informations sur votre ordinateur et sur le navigateur que vous utilisez ?
Pour en savoir plus, découvrez le monde bizarre des "user agents"
Apprenez ce que veut dire: 007ac9-crawler, 360-cn-agent, 360spider, acheetahi, adnormcrawler, advbot
Découvrez la notion de fichier "robots.txt" et comment les différents sites internet l'utilisent, de façon plus ou moins judicieuse:
1 e cigarette: www.1e-cigarette.fr / robots.txt1 s: sansretour.1s.fr / robots.txt1 k: sunantilles-infos.1k.fr / robots.txt01 diagimmo: 01diagimmo.fr / robots.txt01 telechargement: 01telechargement.fr / robots.txt1001 oprestige: www.1001oprestige.fr / robots.txt1 jour 1 sourire: www.1jour1sourire.fr / robots.txt1 tpe: boutic.koolkriss.1tpe.fr / robots.txt0 rg: www.conceptpneus.0rg.fr / robots.txt123 siteweb: exercices-licence-maths.123siteweb.fr / robots.txt1 pas 2 danse: www.1pas2danse.fr / robots.txt20 minutes blogs: princesse.20minutes-blogs.fr / robots.txtabchypnose: abchypnose.fr / robots.txtac versailles: www.clg-guillaumet-jouy.ac-versailles.fr / robots.txt