MedCenaBot — о нашем краулере
MedCena индексирует публично доступные цены на лекарства в 5 латвийских интернет-аптеках, чтобы помочь пользователям найти лучшее предложение. Эта страница описывает наш автоматический бот и как с нами связаться.
Идентификация бота
Наш бот идентифицирует себя следующей строкой User-Agent — её можно увидеть в логах вашего сервера:
Какие сайты мы посещаем
Бот посещает только публичные страницы товаров следующих латвийских интернет-аптек. Мы соблюдаем robots.txt каждого сайта, не создаём аккаунты и не посещаем защищённые страницы.
Какие данные мы собираем
Мы собираем только фактические данные, необходимые для сравнения цен. Авторский контент аптек мы не сохраняем.
Что мы собираем
- · Цена и цена со скидкой
- · Статус наличия
- · Ссылка на страницу товара
- · EAN/штрихкод для идентификации товара
Что мы НЕ собираем
- · Оригинальные описания товаров аптеки
- · Отзывы и рейтинги покупателей
- · Не создаём аккаунты в аптеках
- · Не посещаем корзины, оформление заказа, личные кабинеты
Частота запросов
Бот делает не более одного запроса раз в 2 секунды на один домен, без параллельных соединений. Ответы со статусом 429 или 5xx запускают экспоненциальное замедление. Мы стараемся создавать минимальную нагрузку на серверы аптек.
Исключение из индекса
Если вы представитель аптеки и не хотите, чтобы ваш сайт индексировался, свяжитесь с нами по этому email. Мы исключим вашу аптеку из ротации краулера в течение 24 часов.
bot@medcena.lvПартнёрство через data feed
Вместо того чтобы мы сканировали ваш сайт, вы можете предоставить нам стандартный XML feed товаров (как для Salidzini.lv). Это снизит нагрузку на ваши серверы и обеспечит более точные данные нашим пользователям.
partners@medcena.lv