TagDipBot
To robot naszej porównywarki cen. Odwiedza strony produktów i list produktów w sklepach internetowych, żeby zapisać cenę, dostępność i podstawowe parametry. Tak powstaje historia cen, którą pokazujemy użytkownikom.
Zasady
- Przedstawiamy się uczciwie:
User-Agent: TagDipBot. Nie podszywamy się pod przeglądarki i nie omijamy zabezpieczeń przed robotami. - Przestrzegamy
robots.txt(grupaUser-agent: TagDipBotalbo*). Wcześniej robot nazywał sięPriceTrackerBot. Reguły dla tej nazwy też respektujemy. - Jedno zapytanie naraz na sklep, zwykle co 5–15 sekund; po błędach 429/5xx zwalniamy automatycznie.
- Zapisujemy fakty (cena, dostępność, parametry), nie kopiujemy opisów ani zdjęć na nasze serwery.
- Kupujących, których kierujemy do sklepu, wysyłamy prosto na stronę produktu.
Jak nas zatrzymać
Dodaj do robots.txt:
User-agent: TagDipBot Disallow: /
Wolisz inną częstotliwość albo oficjalny feed produktowy? Napisz: [email protected].