BlaBlaPriceBot, бот цен BlaBlaPrice

BlaBlaPriceBot это бот BlaBlaPrice, сервиса запросов цен, которым управляет ООО «ЭВЕРЛОДЖИК» (Украина). Он читает цены товаров на собственных страницах интернет-магазинов, чтобы индекс цен показывал покупателям актуальные цены и ссылки на магазины.

Что собирает бот

Только публичную цену, валюту, наличие товара, название товара и адрес страницы из структурированных данных страницы (schema.org). Бот не копирует описания, фото и отзывы и не собирает персональных данных.

Как часто и с какой скоростью

Бот работает ночью. Каждую страницу читает примерно раз в неделю. Один сайт получает не больше одного запроса в 5 секунд или реже, если robots.txt просит больший Crawl-delay, а всего бот делает не больше двух запросов одновременно. Он использует условные запросы (ETag, Last-Modified) и сжатие, а сайт, который ему отказывает, не открывает две недели.

robots.txt

Бот выполняет robots.txt: правила для BlaBlaPriceBot, а если их нет, правила для всех роботов (User-agent: *). robots.txt он перечитывает каждый день. Бот представляется так:

BlaBlaPriceBot/1.0 (+https://blablaprice.com/bot)

Как запретить бота

Добавьте эти строки в robots.txt, и со следующего дня бот не будет открывать сайт:

User-agent: BlaBlaPriceBot
Disallow: /

Контакт

Вопросы о боте или просьба убрать магазин: support@blablaprice.com. Фирму можно также убрать из наших списков через форму:

Убрать мою фирму из списка

О BlaBlaPrice · Анализ рынка

chat-bubble