Второй GP-кластер и рождение задачи доставки данных
Первый Greenplum-кластер стал новым центром платформы, но SAS еще долго оставался рядом. Поэтому одной из главных задач стала передача данных между старым и новым контурами. Потом нагрузка выросла, и одного GP стало мало с точки зрения отказоустойчивости. Появился второй кластер. Вместе с ним появилась отдельная инженерная область: перенос данных между кластерами, свежесть, зависимости и приоритеты поставок.
А как из этой задачи получился отдельный DR-контур для Greenplum с доставкой данных, мониторингом и контролем отставания, можно почитать в архивной статье 2015 года «Проект Dual ETL или как мы строили Disaster Recovery для Greenplum».