Поиск B2B-партнёров: как продолжить работу после остановки
При сборе базы партнёров лимит операций может закончиться посередине обработки. Компании уже найдены, контакты частично собраны, а AI-анализ ещё не завершён. В системе поиска B2B-партнёров я предусмотрел продолжение с сохранённого этапа.
На Python я реализовал контрольные точки: система записывает этап остановки, позицию поиска, оставшиеся компании и причину остановки. Команда продолжения читает это состояние и выполняет незавершённую работу.
Важно сохранять остаток. Если повторный запуск снова упирается в лимит, список ожидающих записей сужается. Следующее продолжение получает только оставшийся объём. Поиск, сбор контактов и AI-классификация имеют отдельные пути продолжения.
В проверках подтверждено: оставшийся AI-анализ выполнялся без повторного поиска и обхода сайтов. Продолжение сбора контактов не запускало поиск заново.
Для оператора я добавил сценарии управления запусками. Они автоматически повторяют продолжение с ограничением числа запусков. В коде предусмотрена и защита: после двух повторов подряд с исчерпанием лимита обхода, без обработанных компаний и AI-вызовов, цикл останавливается для проверки оператором.
Это позволяет собирать базу порциями с заданными лимитами обращений и времени работы. Оператор видит причину остановки и может продолжить оставшуюся обработку. Защита от повторов без прогресса ограничивает сценарий расходования платных обходов без продвижения к результату.