🚀 Сегодня мы обсудим важные этапы жизненного цикла данных: использование и повышение их ценности, а также аудит данных. Почему это так важно и как правильно применять эти практики? Давайте разбираться!
🎯 Цели этапа "Использование и повышение ценности данных" 1. Улучшение качества, удобства и полезности данных. 2. Ускорение аналитических процессов.
🔄 Шаги этапа "Использование и повышение ценности данных" 1. Адаптация к новым требованиям: Если появляются новые требования к данным, действуем как на этапе проектирования. Вносим изменения и обновляем метаданные для дальнейшего использования. Для этого используем FR/таск-трекер. 2. Актуализация дата-контрактов: При изменении структуры или появлении новых потребителей актуализируем дата-контракт или SLA DQ с помощью DQ/DC-сервисов. 3. Увеличение ценности справочных данных: Решаем задачи по сопоставлению, дедупликации и слиянию с помощью MDM/RDM-систем и AI.
🎯 Цели этапа «Аудит данных» 1. Снижение стоимости хранения данных. 2. Сокращение затрат на обслуживание (уменьшение числа запросов к командам, обслуживающим данные). 3. Увеличение скорости аналитики и разработки. 4. Повышение NPS (индекса удовлетворенности клиентов).
🔍 Шаги этапа «Аудит данных» 1. Оптимизация места хранения: Понимаем востребованность данных с помощью мониторинга логов (если еще не внедрено, то это стоит сделать). Ключевые параметры: дата обращения, схема, имя таблицы, пользователь и тип операции Select. Исключаем технических пользователей, если нужно. 2. Анализ артефактов управления данными: Проверяем востребованность данных в поиске, качество описания и глубину хранения через мониторинг внутри Каталога данных или аналитический дашборд. 3. Решение по данным: Непопулярные данные удаляем, а популярные - качественно описываем с помощью чек-листа качественного описания.
🏕 Следуйте этим шагам, чтобы повысить эффективность использования данных и оптимизировать их хранение и обслуживание ваших данных 📈💡
