Старший разработчик ETL процессов ( Data Engineer)

Air Astana

Алматы
Постоянная работа
Полная занятость

6 д. назад

Обязанности:

Разработка, оптимизация и поддержка ETL-процессов с использованием Apache Airflow (Python), Azure Fabric (PySpark), Azure Data Factory.
Поддержка и развитие корпоративного DWH в среде Microsoft SQL Server и Azure Fabric.
Оптимизация производительности ETL-процессов, SQL-запросов и джобов; рефакторинг существующих решений, мониторинг и устранение узких мест; улучшение процессов разработки.
Подготовка и актуализация технической документации по новым и существующим ETL-процессам и data pipelines.
Взаимодействие с аналитиками и архитекторами данных для проектирования архитектуры DWH и обеспечения качества данных.
Взаимодействие с представителями IT и бизнес-подразделений для сбора и анализа требований, а также разработки оптимальных решений для поддержки бизнес-процессов.
Опционально: разработка BI-отчетов и дашбордов.

Требования:

Глубокое знание SQL и опыт работы с реляционными СУБД (SQL Server, PostgreSQL, Oracle).
Уверенные знания Python — разработка ETL-скриптов, парсеров и DAG’ов в Airflow.
Опыт работы с инструментами оркестрации данных (Apache Airflow, Dagster, Prefect), создание и поддержка ETL-процессов в production-среде.
Практический опыт работы с облачными решениями Microsoft Azure (Data Factory, Synapse Analytics или Fabric) либо с иными облачными платформами (AWS, GCP).
Опыт работы с Apache Spark (PySpark или Spark SQL) — разработка и оптимизация распределенных трансформаций данных.
Хорошее понимание принципов построения DWH, Data Lake, Lakehouse, а также ключевых аспектов data governance, data quality, data lineage и лучших практик управления данными.
Будет плюсом : опыт разработки BI-отчетности и аналитических дашбордов, понимание принципов работы с аналитическими моделями и витринами данных

Условия:

Офис в центре города;
График работы: с 08:00 до 17:00;
Медицинская страховка;
Специальный тариф на авиаперелеты для Вас и 2-х близких родственников (в соответствии с действует «Положение о сервисных авиаперевозках»);
Программы лояльности (скидки на услуги компаний для партнеров).

Группа «Эйр Астана» — крупнейшая группа авиакомпаний в Центральной̆ Азии и Кавказе по объему выручки и размеру воздушного флота. Благодаря своему молодому и современному парку из 61 самолетов компания обеспечивает регулярные, прямые и транзитные, ближнемагистральные и дальнемагистральные авиаперевозки, а также грузы на внутренних, внутрирегиональных и международных маршрутах через Центральную Азию, Кавказ, Дальний Восток, странам Персидского залива, Индии и Европе. Два дифференцированных, но дополняющих друг друга бренда Группы «Эйр Астана» (Air Астана, ее бренд с полным спектром услуг и ведущий авиаперевозчик Казахстана, и FlyArystan, ее бренд бюджетных авиакомпаний) позволяют группе авиакомпаний ориентироваться на различные клиентские рынки и географические регионы, обеспечивая выбор между широкий спектр потребностей клиентов и целей путешествия.

HeadHunter

Откликнуться