Поиск B2B-партнёров: как продолжить работу после остановки

При сборе базы партнёров лимит операций может закончиться посередине обработки. Компании уже найдены, контакты частично собраны, а AI-анализ ещё не завершён. В системе поиска B2B-партнёров я предусмотрел продолжение с сохранённого этапа.

На Python я реализовал контрольные точки: система записывает этап остановки, позицию поиска, оставшиеся компании и причину остановки. Команда продолжения читает это состояние и выполняет незавершённую работу.

Важно сохранять остаток. Если повторный запуск снова упирается в лимит, список ожидающих записей сужается. Следующее продолжение получает только оставшийся объём. Поиск, сбор контактов и AI-классификация имеют отдельные пути продолжения.

В проверках подтверждено: оставшийся AI-анализ выполнялся без повторного поиска и обхода сайтов. Продолжение сбора контактов не запускало поиск заново.

Для оператора я добавил сценарии управления запусками. Они автоматически повторяют продолжение с ограничением числа запусков. В коде предусмотрена и защита: после двух повторов подряд с исчерпанием лимита обхода, без обработанных компаний и AI-вызовов, цикл останавливается для проверки оператором.

Это позволяет собирать базу порциями с заданными лимитами обращений и времени работы. Оператор видит причину остановки и может продолжить оставшуюся обработку. Защита от повторов без прогресса ограничивает сценарий расходования платных обходов без продвижения к результату.

Поиск B2B-партнёров: как продолжить работу после остановки | Сетка — социальная сеть от hh.ru