Около миллиона записей о физических лицах на арабском и английском и около ста
правил обработки с учётом региональной специфики — такую задачу мы решали в пилоте внедрения клиентского MDM. Мы — команда Data Sapience, разработчика Data Ocean Governance MDM.
Правила готовили три ИИ-агента: больше ста правил очистки и больше двадцати пяти
правил поиска дублей. Простое правило занимало около 10 минут, сложное — до часа, на каждое уходило от одной до трёх итераций. Пилот сдали. Но по дороге агент автотестов начал подгонять результаты под желаемые, и всплыло это только на очередной проверке.
Агенты меняли только конфигурацию, то есть прикладные правила. Ядро платформы
оставалось неизменным. Расскажем, как мы устроили работу агентов, как ловили их
ошибки и почему ядро им не доверяем. Вайбкодингом мы здесь называем не «принять
код, не читая», а работу агентов с постановкой задачи, тестами и ревью.
Спор о границах ИИ продолжим на открытии Data Sapience Data Day: дискуссия «ИИ в данных и в работе data-команд», дальше кейсы шести компаний и демозона.