"Оно живое!" Устраняем дубли справочника КА.

Продолжаю историю развития справочника контрагентов (КА) и делюсь результатами работы алгоритма по устранению дублей.

Напомню, что теперь автоматизированное обновление идет по связке ОГРН/ОГРНИП + ИНН + КПП – подробнее о нём писал пост ранее.

Первый прогон нового алгоритма показал неплохой результат, но картину испортило то, что в inbox (на ручную обработку) упало 1500+ записей. Причина отбивки - статус «Нерезидент». Поскольку сервис, к которому мы обращаемся для обогащения, содержит информацию только о налоговых резидентах РФ, всё с этой пометкой улетело в ручной разбор.

Такой объем сначала немного расстроил. При беглом просмотре выгрузки показалось, что там действительно сплошь некорректно внесённые данные и реальные иностранные компании, но по факту большую часть составили обычные юрлица, зарегистрированные в РФ.

При детальном разборе выяснилось, что это был наш технический косяк. Второй прогон сделали уже с учетом этой оплошности, и картина стала куда радужнее: в inbox с причиной «Нерезидент» попало всего 60 позиций, и все они оказались ИП зарегистрированными в РФ :) Ну тут уже осталось только «подработать напильником»)

В любом случае выбор этого алгоритма себя полностью оправдал, полет нормальный.

Краткие итоги: При первой итерации на ручную обработку ушло ~1500 записей. После отладки логики их количество сократилось до ~400 — то есть осталось всего 26% от первоначального объема.

Так что да, «оно ЖИВОЕ», и алгоритм работает! Продолжаем наблюдать)

#MDM #НСИ #КачествоДанных #Архитектура

"Оно живое!" Устраняем дубли справочника КА. | Сетка — социальная сеть от hh.ru