SAS, предел ETL и первый большой выбор платформы

2007-2011: в платформе безрадельно царствует SAS. Да, мы были тогда совсем небольшими - 12 человек в команде, 300 пользователей и пара серверов с 3ТБ данных. Но у нас уже появляются свои инфраструктурные компоненты (например планировщик процессов). А на горизонте замаячили ограничения - ETL упирается в серверы, а бизнес (и нагрузка конечно) растет.

Следующим шагом стал выбор MPP-базы. Рассматривали Teradata, Vertica, Netezza и Greenplum: смотрели на стоимость, доступность, модель поставки и возможность самим управлять инфраструктурой. В итоге Greenplum стал основой нового DWH и надолго определил, как платформа будет масштабироваться дальше.

А как выглядели последствия этого решения и сам переезд из SAS в Greenplum, можно узнать в архивной статье 2012 года «Интегрируем SAS и Greenplum».

#data_evolution