Data Quality | Качество данных
23.02
Quality Gate, что это, нужно ли, плюсы и минусы.
Начнем с определения. QG это проверка (или набор проверок), по которой при получении результата "не ок" поставка данных дальше по тракту останавливается.
Какие плюсы? Потребители данных не получат некачественные данные и всё произойдет автоматически. Лучше старые, чем плохие.
Минусы - нужна очень тонкая настройка, как самих проверок, так и времени срабатывания, понимание возможных технических работ на тракте поставки. При срабатывании скорее всего будет разбор причин и данные уйдут дальше позже, чем обычно.
Нужно ли? Пожалуй, да. Хорошие данные стоят времени, потраченного на настройку.
А как у вас? Есть на тракте поставки данных quality gate?
#качестводанных #dataqualityеще контент в этом сообществе
еще контент в этом соообществе
Data Quality | Качество данных
23.02
войдите, чтобы увидеть
и подписаться на интересных профи