Старший разработчик ETL процессов

Air Astana

  • Алматы
  • Постоянная работа
  • Полная занятость
  • 11 д. назад
Обязанности:
  • Разработка, оптимизация и поддержка ETL-процессов с использованием Apache Airflow (Python), Azure Fabric (PySpark), Azure Data Factory.
  • Поддержка и развитие корпоративного DWH в среде Microsoft SQL Server и Azure Fabric.
  • Оптимизация производительности ETL-процессов, SQL-запросов и джобов; рефакторинг существующих решений, мониторинг и устранение узких мест; улучшение процессов разработки.
  • Подготовка и актуализация технической документации по новым и существующим ETL-процессам и data pipelines.
  • Взаимодействие с аналитиками и архитекторами данных для проектирования архитектуры DWH и обеспечения качества данных.
  • Взаимодействие с представителями IT и бизнес-подразделений для сбора и анализа требований, а также разработки оптимальных решений для поддержки бизнес-процессов.
Требования:
  • Глубокое знание SQL и опыт работы с реляционными СУБД (SQL Server, PostgreSQL, Oracle).
  • Уверенные знания Python — разработка ETL-скриптов, парсеров и DAG’ов в Airflow.
  • Опыт работы с инструментами оркестрации данных (Apache Airflow, Dagster, Prefect), создание и поддержка ETL-процессов в production-среде.
  • Практический опыт работы с облачными решениями Microsoft Azure (Data Factory, Synapse Analytics или Fabric) либо с иными облачными платформами (AWS, GCP).
  • Опыт работы с Apache Spark (PySpark или Spark SQL) — разработка и оптимизация распределенных трансформаций данных.
  • Хорошее понимание принципов построения DWH, Data Lake, Lakehouse, а также ключевых аспектов data governance, data quality, data lineage и лучших практик управления данными.
Условия:
  • Офис в центре города;
  • График работы: с 08:00 до 17:00;
  • Медицинская страховка;
  • Специальный тариф на авиаперелеты для Вас и 2-х близких родственников (в соответствии с действует «Положение о сервисных авиаперевозках»);
  • Программы лояльности (скидки на услуги компаний для партнеров).
Группа «Эйр Астана» — крупнейшая группа авиакомпаний в Центральной̆ Азии и Кавказе по объему выручки и размеру воздушного флота. Благодаря своему молодому и современному парку из 61 самолетов компания обеспечивает регулярные, прямые и транзитные, ближнемагистральные и дальнемагистральные авиаперевозки, а также грузы на внутренних, внутрирегиональных и международных маршрутах через Центральную Азию, Кавказ, Дальний Восток, странам Персидского залива, Индии и Европе. Два дифференцированных, но дополняющих друг друга бренда Группы «Эйр Астана» (Air Астана, ее бренд с полным спектром услуг и ведущий авиаперевозчик Казахстана, и FlyArystan, ее бренд бюджетных авиакомпаний) позволяют группе авиакомпаний ориентироваться на различные клиентские рынки и географические регионы, обеспечивая выбор между широкий спектр потребностей клиентов и целей путешествия.

HeadHunter