Скрипты и парсеры на заказ

Небольшая программа, которая делает одну скучную вещь и делает её каждый раз одинаково: собирает цены конкурентов, вытаскивает объявления, перекладывает данные из выгрузки в таблицу. Часто это самый дешёвый способ убрать рутину — дешевле, чем внедрять систему.

Как идёт работа

  1. 1 Источник Смотрим источник: как устроены страницы, есть ли API, как часто меняется разметка и какие там ограничения по частоте запросов
  2. 2 Прототип Собираем прототип на небольшой выборке и показываем результат — до того, как писать всё остальное. Если данные не те, это выясняется на первом дне, а не на десятом
  3. 3 Устойчивость Доводим до устойчивости: повторные попытки, паузы между запросами, аккуратное поведение под нагрузкой источника и понятное поведение при ошибке
  4. 4 Выгрузка Подключаем выгрузку и расписание: результат сам приезжает в таблицу, базу или коротким отчётом в мессенджер
  5. 5 Передача Отдаём исходники с инструкцией: как запустить, где менять параметры и что делать, если источник переехал

Что обычно просят собрать

Список неполный — это то, с чем приходят чаще всего.

  • Цены и наличие у конкурентов — по своему списку позиций, с историей изменений по датам

  • Объявления с досок и маркетплейсов: карточки, параметры, дата публикации, контакты продавца

  • Открытые реестры и справочники, когда нужно проверить контрагента или собрать список по критерию

  • Свои же данные из системы, у которой нет нормальной выгрузки, — включая старые архивы

  • Разовая обработка большого файла: почистить, свести дубли, разложить по категориям, найти расхождения

  • Скрипт-переходник между двумя сервисами, которые не умеют разговаривать друг с другом напрямую

Расскажите, что нужно сделать

Ответим в течение рабочего дня. На связи инженеры, которые будут делать проект.