BlaBlaPriceBot, бот цен BlaBlaPrice
BlaBlaPriceBot это бот BlaBlaPrice, сервиса запросов цен, которым управляет ООО «ЭВЕРЛОДЖИК» (Украина). Он читает цены товаров на собственных страницах интернет-магазинов, чтобы индекс цен показывал покупателям актуальные цены и ссылки на магазины.
Что собирает бот
Только публичную цену, валюту, наличие товара, название товара и адрес страницы из структурированных данных страницы (schema.org). Бот не копирует описания, фото и отзывы и не собирает персональных данных.
Как часто и с какой скоростью
Бот работает ночью. Каждую страницу читает примерно раз в неделю. Один сайт получает не больше одного запроса в 5 секунд или реже, если robots.txt просит больший Crawl-delay, а всего бот делает не больше двух запросов одновременно. Он использует условные запросы (ETag, Last-Modified) и сжатие, а сайт, который ему отказывает, не открывает две недели.
robots.txt
Бот выполняет robots.txt: правила для BlaBlaPriceBot, а если их нет, правила для всех роботов (User-agent: *). robots.txt он перечитывает каждый день. Бот представляется так:
BlaBlaPriceBot/1.0 (+https://blablaprice.com/bot)Как запретить бота
Добавьте эти строки в robots.txt, и со следующего дня бот не будет открывать сайт:
User-agent: BlaBlaPriceBot
Disallow: /Контакт
Вопросы о боте или просьба убрать магазин: support@blablaprice.com. Фирму можно также убрать из наших списков через форму: