Data Platform как внутренний технологический продукт
Критичная Data Platform — это не только набор технологий и инфраструктуры. Это внутренний продукт, у которого есть пользователи, команды-интеграторы, SLA, roadmap, delivery-модель и стоимость изменений. Сейчас я развиваю DWH/Data Platform в технологическом контуре ВТБ. В прямом управлении — 35+ специалистов в 4 кросс-функциональных командах, включая 5 тимлидов. Платформенная экосистема взаимодействует примерно с 90 командами, а объём обрабатываемых данных составляет более 3 ПБ. В таких условиях основными задачами становятся: • разделение ответственности между core-платформой и командами витрин; • предсказуемое управление релизами; • развитие DevOps/SRE и эксплуатационной зрелости; • снижение зависимости от отдельных экспертов; • развитие тимлидов и инженерной культуры; • повышение скорости delivery без снижения надёжности; • практичное внедрение AI/LLM и AI-агентов в инженерные процессы. Главный вывод: Data Platform нужно развивать одновременно как технологическую систему, продукт и инженерную организацию. Только так можно масштабировать платформу без пропорционального роста сложности и управленческих издержек. Буду писать о Data Platform, DWH, DevOps/SRE, управлении инженерными командами и AI-enabled Engineering. Открыт к обмену опытом и executive-диалогу о развитии критичных технологических платформ.