KonkurencjaBot, robot serwisu Konkurencja

Jak rozpoznać robota

Każde zapytanie robota ma w nagłówku User-Agent ten sam podpis.

KonkurencjaBot/1.0 (+https://konkurencja.pl/bot)

Jeśli w logach serwera widzisz ten podpis, to wizyta naszego robota. Robot nie udaje przeglądarki i nie zmienia podpisu.

Co robot czyta, a czego nie

• Czyta publiczne podstrony, takie jak strona główna, cennik, oferta, blog i kariera, oraz mapę witryny i kanały RSS.
• Nie loguje się, nie wypełnia formularzy, nie dodaje produktów do koszyka i nie obchodzi żadnych zabezpieczeń.
• Nie zbiera danych osobowych odwiedzających ani pracowników. Interesują go treści firmowe, na przykład ceny pakietów i opisy usług.
• Odwiedza stronę z umiarkowaną częstotliwością, zwykle kilka razy na dobę albo rzadziej, i robi przerwy między kolejnymi zapytaniami.

Robot respektuje robots.txt

Przed odczytem robot pobiera plik robots.txt Twojej domeny i stosuje się do reguł dla nazwy KonkurencjaBot, a gdy ich nie ma, do reguł ogólnych dla wszystkich robotów. Ścieżki zablokowane w pliku nie są odczytywane.

Jak zablokować robota na swojej stronie

Żeby całkowicie zablokować odczyt, dopisz do pliku robots.txt w katalogu głównym domeny poniższe dwie linie.

User-agent: KonkurencjaBot
Disallow: /

Możesz też zablokować tylko wybrane ścieżki, na przykład katalog z cennikiem.

User-agent: KonkurencjaBot
Disallow: /cennik/

Zmiana działa przy najbliższym odczycie pliku robots.txt, bez kontaktu z nami. Od tej chwili klienci serwisu widzą przy Twojej stronie informację o braku odczytu.

Kontakt

Jeśli robot zachowuje się niezgodnie z tym opisem albo masz pytanie o jego działanie, napisz na [email protected]. Podaj domenę, przybliżony czas wizyty i, jeśli możesz, fragment logu serwera.

Więcej o źródłach danych i ochronie informacji przeczytasz na stronie bezpieczeństwo i ochrona danych.