Теперь дока - мой верный другВ последнее время чувствую необходимость пойти в доку и почитать, если нужно что-то найти. Привожу список полезных ссылочек с небольшим описанием:✨ Spark - движок для распределенных вычислений большого объема данных на нескольких машинкахhttps://spark.apache.org/docs/latest/configuration.html
🐇 Trino - SQL-движок для запросов к разным видам источников данныхhttps://trino.io/docs/current/index.html
👩💻Scala - Java-подобный язык (но не совсем)https://www.scala-lang.org/api/3.x/scala.html
👩💻 PyArrow - либа для работы с даннымиhttps://arrow.apache.org/docs/python/index.html
🐘 YARN API - API для менеджера ресурсов на кластереhttps://hadoop.apache.org/docs/stable/hadoop-yarn/hadoop-yarn-site/ResourceManagerRest.html
🍺 brew - менеджер пакетов для макаhttps://formulae.brew.sh/formula/
👩💻 Python - ну что тут еще добавитьhttps://docs.python.org/3/library/
🌺 Airflow - оркестратор потоков обработкиhttps://airflow.apache.org/docs/apache-airflow/stable/index.html
⛩ Jinja - шаблоны на питоне для динамической генерацииhttps://jinja.palletsprojects.com/en/stable/
👩💻 Docker - платформа для контейнеризации приложенийhttps://docs.docker.com/reference/
👨🏫 Bamboo - CI/CDhttps://confluence.atlassian.com/bamboo/bamboo-documentation-289276551.html
🗻 Iceberg - табличный формат хранения данных с транзакциями, возможностью иметь несколько версий таблицы и т.д. https://iceberg.apache.org/docs/latest/
🟢 Apache ORC - колоночный формат хранения данных https://orc.apache.org/docs/index.html