Предлагаю ознакомиться с моим резюме Текущее место работы: Проект: Data Platform, разработка аналитических дашбордов на Superset Обязанности: - Спроектировал архитектуру и реализовал отказоустойчивую Ingestion-платформу, обеспечивающую сбор и доставку данных из 30+ источников в DWH (Clickhouse, Postgres, Trino, Airflow) с использованием Event-Driven архитектуры; - Создавал и поддерживал Data Quality метрики; - Оптимизировал работу СУБД и запросов; - Обеспечивал подтоговку данных для визуализации в Apache Superset, а также согласованное обновление витрин данных; - Проектировал и реализовывал микросервисную архитектуру на проекте, Event Driven Architecture; - Разрабатывал надежные Ingestion пайплайны с использованием различных подходов - batch, stream, ETL, ELT, SCD1, SCD2; - Покрыл Ingestion техническими и бизнес метриками; - Участвовал в процессе системного анализа, вносил предложения по стратегическому развитию проекта; Стек: Superset, Airflow, Python, Django, ORM, asyncio, Postgres, Clickhouse, Ansible, Docker, Gitlab CI-CD, Redis, Celery, Kafka, Pydantic, Trino Достижения: - разработал стабильный и развивающийся Ingestion-проект, охватывающий 30+ разнородных источников, заказчиков из самых нагруженных по данным и аналитике областей компании; - уменьшил итоговое время вывода данных в Superset в сложных кейсах с 20+ сек до 5 сек и меньше (осуществил оптимизацию запросов, кэширование, изменение архитектуры); - покрыл тестами проект до отметки 90+; - предлагал и реализовывал архитектурные решения и подходы, в том числе с использованием микросервисов; - провел аудит и рефакторинг узких мест и неудачных решений Legacy-ядра. Исправил концептуальные архитектурные ошибки без остановки текущих бизнес-процессов Контакты: Telegram: @ManyEchoes skkiminock@mail.ru
Backend Разработчик в Kokoc Group
· 22.06резюме
0 комментов