Тонкая грань между ролями: Инженер данных, Аналитик данных, Аналитик-инженер
Всем привет! Хочу визуально и понятно показать весь процесс работы с данными в компаниях, а из этого поймем у какой роли какая выделяется зона ответственности.
Инженер данных (DE) отвечает за:
- поддержание инфраструктуры и сервисом DWH (само хранилище, ETL, очереди сообщений и все что с этим связано)
- выполнение дата-контрактов по загрузке сырых данных из систем-источников
- написание мониторингов и алертингов чтобы быть уверенным что потоки данных работаю как ожидается
- написание витрин данных по запросу продуктовых команд, где нет своих ресурсов аналитиков
Аналитик данных (DA) отвечает за:
- пониманием бизнес-задач для анализа данных, поиск нужных данных и определение метрик
- проверку данных в источнике и написание дата-контрактов, чтобы данные из источника попали в DWH хранилище
- описание бизнес-логики и разработку витрин данных с нужной под бизнес-задачу логикой
- проведение процесса анализа данных, поиска закономерностей, трендов и т.д.
- создание визуальных и понятных бизнесу отчетов, донесение смысла анализа до бизнеса на их языке смыслов
- создание нужных бизнесу и команде автоматизаций (джобы различные, отправки уведомлений с данными, алертинг по данными, рассылки и прочее)
И как вы уже можете заметить основное отличие в том, что
Инженер - человек техники, который при помощи кода и технологий пишет надежные потоки данных.
Аналитик - человек мышление, чей мозг и аналитические мысли превращают простые таблицы в гипотезы, выводы и читаемые отчеты для бизнеса.
И довольно часто в компаниях даже где есть и та и другая выделенная роль есть потребность в том, чтобы аналитики умели делать инженерную часть работы, а инженеры часть аналитической работы. А в каких-то компаниях прямо явно ищут fullstack-специалистов, которые умеют объединять в себе компетенции аналитика и инженера в одном лице. Отсюда и возникает роль под названием Аналитик-инженер.
Именно на это объединение компетенций будет направлен как наш практический интенсив, так и практический курс