BlaBlaPriceBot, בוט המחירים של BlaBlaPrice
BlaBlaPriceBot הוא הבוט של BlaBlaPrice, שירות לבקשות הצעות מחיר המופעל על ידי EVERLOGIC LLC (אוקראינה). הוא קורא מחירי מוצרים בדפים של חנויות מקוונות עצמן, כדי שמדד המחירים יציג לקונים מחירים עדכניים וקישורים לחנויות.
מה הבוט אוסף
רק את המחיר הפומבי, המטבע, האם המוצר במלאי, שם המוצר וכתובת הדף, מתוך הנתונים המובנים של הדף (schema.org). הבוט אינו מעתיק תיאורים, תמונות או ביקורות ואינו אוסף מידע אישי.
באיזו תדירות ובאיזו מהירות
הבוט פועל בלילה. כל דף נקרא בערך פעם בשבוע. אתר אחד מקבל לכל היותר בקשה אחת בכל 5 שניות, או פחות כאשר robots.txt מבקש Crawl-delay ארוך יותר, ובסך הכול הבוט שולח לכל היותר שתי בקשות בו זמנית. הוא משתמש בבקשות מותנות (ETag, Last-Modified) ובדחיסה, ומפסיק לשבועיים לבקר באתר שמסרב לו.
robots.txt
הבוט מכבד את robots.txt: הכללים שנכתבו עבור BlaBlaPriceBot, ואם אין כאלה, הכללים לכל הרובוטים (User-agent: *). הוא קורא את robots.txt מחדש בכל יום. הוא מזדהה כך:
BlaBlaPriceBot/1.0 (+https://blablaprice.com/bot)
איך לחסום את הבוט
יש להוסיף את השורות האלה ל-robots.txt, ומהיום שלמחרת הבוט לא יפתח את האתר:
User-agent: BlaBlaPriceBot
Disallow: /
יצירת קשר
שאלות על הבוט או בקשה להסיר חנות: support@blablaprice.com. אפשר גם להסיר חברה מהרשימות שלנו בטופס הזה: