A HoReCa Radar crawleréről

Ha a szervernaplódban találkoztál velünk, ez az oldal megmondja, mit csinálunk és hogyan állíthatsz le minket.

Mi ez

A HoReCa Radar budapesti vendéglátóhelyek nyilvánosan közzétett étlapjait gyűjti, és ebből készít piaci elemzéseket élelmiszer-nagykereskedőknek. A crawlerünk kizárólag olyan oldalakat olvas, amelyeket az étterem maga tett közzé a saját weboldalán.

A naplódban így azonosítható:

HorecaRadarBot/0.1 (+https://horecaradar.org/crawler)

Hogyan viselkedik

Betartja a robots.txt-t. Ha ott tiltod, nem jövünk.
Hosztonként legfeljebb kétmásodpercenként egy kérés.
Néhány hetente tér vissza, nem naponta.
Ha az oldal nem változott, le sem tölti újra.
Nem tölt ki űrlapot, nem lép be sehova, és nem gyűjt személyes adatot.

Ha nem szeretnéd

Két út van, mindkettő működik.

1. A saját robots.txt-ddel. Ez azonnal hat, és nem kell megvárnod a válaszunkat:

User-agent: HorecaRadarBot
Disallow: /

2. Írj nekünk a crawler@horecaradar.org címre. Elég egy sor és a domain neve.

A kizárás nálunk nem ígéret, hanem adat: a rendszerbe rögzítjük, és onnantól minden futás átugorja az adott címet. Nem oldjuk fel automatikusan, és nem kell újra szólnod érte.

Adatvédelem

Étlapokat és telephelyi adatokat gyűjtünk — ételneveket, árakat, nyitvatartást —, nem személyes adatot. Ha úgy gondolod, hogy mégis rólad szóló személyes adatot kezelünk, írj a privacy@horecaradar.org címre, és megnézzük.

Kapcsolat

Bármi egyéb: crawler@horecaradar.org. Ezt a fiókot ember olvassa.