Přejít na obsah

WebPitva je robot, který pomalu čte veřejné stránky katalogů.

Možná jste ho našli v záznamech svého webu, kde se hlásí jako WebPitva/1.0. Tady je popsané, jak se chová a jak se na nás obrátit.

Schéma webu nakreslené jako cévní strom Nahoře je soubor robots.txt, pod ním se větví cesty k jednotlivým stránkám. Po jedné cestě postupují tečky s velkými rozestupy. Pravá větev je červeně podvázaná a stránky za ní zůstávají nepřečtené. a b c d
Tečky jsou jednotlivé požadavky robota, mezery mezi nimi pauzy. Podvázaná větev je část webu, kam nesmí.

Jak se robot chová

a
Řídí se vaším souborem robots.txt. Co v něm zakážete, to nečte.
b
Čte jen veřejné stránky, které vidí každý návštěvník bez přihlášení. Nikam se nepřihlašuje.
c
Mezi dvěma požadavky dělá dlouhé pauzy.
d
Když ho web odmítne, odejde.

Přesnou identifikaci robota najdete v technických údajích.

Nepřejete si, aby robot procházel váš web?

Napište nám, nebo do souboru robots.txt přidejte tyto dva řádky:

User-agent: WebPitva
Disallow: /

Chcete odstranit údaje?

Napište nám, o které údaje jde a kde jste je viděli. Odpovíme na e-mail, který uvedete.

Napsat nám