ISP: Zlobivy robot?

Martin Mares mj at atrey.karlin.mff.cuni.cz
Sat Jan 24 17:41:03 CET 1998


Dobreho dne preji,

>     Za jednu z nejpodstatnejsich povazuji ruzna FQDN pro jeden stroj.
> Myslim, ze vetsina z vas vi o ruznych adresach NetMagu (netmag.cz,
> netmag.home.cz, netmag.vas.chce.nasrat.cz, www.netmag.cz). Robot nema
> jednoznacnou moznost zjistit, ze se jedna o ten a tyz WWW server (viz
> HTTP/1.1), ani metoda zjistovani IP neni spolehliva (znam nekolik stroju s
> vicero IP). Robot nasosa sice ze stroje 4x peering.html, ale pro nej se to
> jevi jako 4 ruzne stroje. Tolik tedy prvni.

   I to, ze vice jmen se mapuje na jednu IP adresu, neznamena, ze prislusna
URL odpovidaji ruznym dokumentum -- viz to, jak HTTP resi virtualni servery.

>   Ad AVI - toto je chyba =)

   To, ze se soubor jmenuje "neco.AVI" jeste vubec neznamena, ze to nemuze
byt HTML. Rozhodujici je Content-type vydany serverem, jenze ten se robot
nemuze dozvedet aniz se serveru zepta -- idealni by pravdepodobne bylo, kdyby
na takoveto podezrele soubory robot nejdrive pouzil request HEAD a teprve
pote, co zjisti, ze Content-type jej zajima, soubor stahnul.

				Have a nice fortnight
--
Martin `MJ' Mares   <mj at ucw.cz>   http://atrey.karlin.mff.cuni.cz/~mj/
Faculty of Math and Physics, Charles University, Prague, Czech Rep., Earth
"How an engineer writes a program: Start by debugging an empty file..."



More information about the Smajlik mailing list