Изучаю новые технологии в свободное время. Люблю путешествовать, иногда езжу на озера поплавать на сапе. Добавил в аналитическую платформу и разбираюсь в работе S3 с Iceberg таблицами под управлением Nessie каталога. Инкрементальная загрузка проходит под управление Airflow с запуском скриптов PySpark / Spark SQL. Таблицы анализирую с помощью Trino, планирую в ближайшем будущем добавить dbt
totbarin
· 02.03резюме
0 комментов