BlaBlaPriceBot, бот цін BlaBlaPrice
BlaBlaPriceBot це бот BlaBlaPrice, сервісу запитів цін, яким керує ТОВ «ЕВЕРЛОДЖІК» (Україна). Він читає ціни товарів на власних сторінках інтернет-магазинів, щоб індекс цін показував покупцям актуальні ціни й посилання на магазини.
Що збирає бот
Лише публічну ціну, валюту, наявність товару, назву товару й адресу сторінки зі структурованих даних сторінки (schema.org). Бот не копіює описи, фото й відгуки і не збирає персональних даних.
Як часто і з якою швидкістю
Бот працює вночі. Кожну сторінку читає приблизно раз на тиждень. Один сайт отримує не більше одного запиту на 5 секунд або рідше, якщо robots.txt просить більший Crawl-delay, а загалом бот робить не більше двох запитів одночасно. Він використовує умовні запити (ETag, Last-Modified) і стиснення, а сайт, що відмовляє йому, не відкриває два тижні.
robots.txt
Бот виконує robots.txt: правила для BlaBlaPriceBot, а якщо їх немає, правила для всіх роботів (User-agent: *). robots.txt він перечитує щодня. Бот називає себе так:
BlaBlaPriceBot/1.0 (+https://blablaprice.com/bot)Як заборонити бота
Додайте ці рядки в robots.txt, і з наступного дня бот не відкриватиме сайт:
User-agent: BlaBlaPriceBot
Disallow: /Контакт
Питання про бота або прохання прибрати магазин: support@blablaprice.com. Фірму можна також прибрати з наших списків через форму: