Парсер сайтов на заказ: сколько стоит и как поставить задачу

Парсер сайта на заказ стоит по-разному: простой скрипт для одного открытого каталога делается быстро и недорого, а сбор данных с десятков источников с защитой от ботов, расписанием и выгрузкой в вашу систему — отдельный проект. Цену определяют пять вещей: источник, объём, поля, регулярность и куда уходят данные. Если собрать их в техническое задание, оценки подрядчиков станут сопоставимыми.

Что именно вы покупаете: парсер, сервис или готовую программу

Запрос «купить парсер» объединяет три разные вещи, и от выбора зависит бюджет и риски.

От чего зависит цена парсера

Публикации разработчиков сходятся в одном: цену нельзя назвать, не увидев источник данных. Простой парсер — это один понятный сайт с открытым каталогом, небольшим набором полей и разовой выгрузкой в таблицу. Всё остальное дороже (см. разборы на vc.ru и workspace.ru).

Законно ли это

Сбор открытых данных сам по себе не запрещён, но есть границы. Базы данных охраняются четвёртой частью Гражданского кодекса (статья 1334: изготовитель базы вправе запретить извлечение существенной части её содержимого), персональные данные подпадают под 152-ФЗ, а чрезмерная нагрузка на чужой сервер может быть расценена как атака. Подробнее о ценах конкурентов и рисках — в статье «Парсер цен конкурентов: сколько стоит и законно ли».

• Не собирайте персональные данные людей без основания.
• Уважайте robots.txt и условия сайта, не давайте высокую нагрузку: делайте паузы между запросами.
• Не копируйте чужие тексты и фото на свой сайт: парсинг данных и публикация чужого контента — разные вещи.
• Если собираете данные партнёров или поставщиков, договоритесь об API или выгрузке.

Как поставить задачу парсеру: шаблон ТЗ

1. Цель. Зачем нужны данные: мониторинг цен, наполнение каталога, база компаний, аналитика.
2. Источники. Список адресов и пример страницы каталога и карточки.
3. Поля. Точный перечень с примерами значений и форматом (число, текст, ссылка).
4. Объём и частота. Сколько страниц и как часто обновлять; нужна ли история изменений.
5. Формат результата. Excel, CSV, база данных, API, загрузка в вашу систему.
6. Обработка ошибок. Что делать, если страница недоступна или поле пустое: пропустить, повторить, уведомить.
7. Приёмка. Контрольная выборка на 50–100 записей, которую вы сверяете вручную.

Как сравнить предложения подрядчиков

Дайте одно и то же ТЗ нескольким исполнителям и сравнивайте не итоговую цену, а состав: поддержка при смене вёрстки, логи и уведомления об ошибках, права на исходный код, где парсер работает (на вашем сервере или у подрядчика), как защищены ваши доступы. Дешёвый парсер без этих пунктов чаще всего превращается в разовый скрипт, который никто не обслуживает.

Когда парсер не нужен

Если у источника есть официальный API, выгрузка YML или партнёрский прайс, берите их: это стабильнее и безопаснее юридически. Парсер нужен там, где данные доступны только на страницах. Автоматизацию такого рода мы делаем в рамках разработки автоматизации, а загрузку прайсов поставщиков разбираем в отдельной статье о прайс-парсере.