Старший инженер данных

Freedom Telecom

  • Нур-Султан
  • Постоянная работа
  • Полная занятость
  • 1 д. назад
Freedom Telecom - современная телекоммуникационная компания, развивающая на рынке Республики Казахстан широкополосный доступ к сети интернет в каждый дом и открытый доступ Wi-Fi в крупных городах. Мы работаем в тесном сотрудничестве с мировыми производителями оборудования - программного обеспечения.Чем предстоит заниматься:
  • Проектирование и развитие архитектуры хранилищ данных (DWH).
  • Разработка и поддержка ETL/ELT-пайплайнов на базе Apache Spark (PySpark).
  • Оптимизация производительности Spark jobs (настройка конфигураций, партиционирование данных).
  • Очистка, трансформация и агрегация больших объемов данных.
  • Реализация пакетной обработки данных.
  • Оркестрация и автоматизация процессов обработки данных с помощью Apache Airflow.
  • Проектирование моделей данных, выбор платформы хранения, создание объектов схем.
  • Управление миграциями баз данных с использованием Liquibase.
  • Интеграция с различными источниками данных и брокерами сообщений.
Требования:
  • Опыт работы в роли Data Engineer / Senior Data Engineer от 3 лет.
  • Уверенное знание Python и SQL.
Опыт работы с:
  • Apache Spark / PySpark
  • Apache Airflow
Знание и практический опыт с БД:
  • Oracle
  • Greenplum
Опыт работы с файловыми и облачными хранилищами:
  • HDFS
  • S3
Опыт работы с брокерами сообщений:
  • Kafka
  • RabbitMQ
  • Понимание принципов построения DWH и архитектур обработки данных.
Опыт работы с системами контроля версий и миграций:
  • GitLab
  • Liquibase
Будет плюсом:
  • Опыт работы с большими объемами данных (Big Data).
  • Опыт проектирования высоконагруженных систем.
  • Понимание принципов Data Governance и Data Quality.
  • Опыт работы в распределенных командах.
Что мы предлагаем:
  • График 5/2, с 9:00 до 18:00;
  • Свободный дресс-код;
  • Привилегии от экосистемы Freedom Holding;
  • Экстра days off, помимо отпускных и больничных;
  • Материальная помощь по памятным событиям;
  • Самые инновационные, амбициозные проекты и задачи;
  • Карьерный рост в команде дружных профессионалов.
Freedom Telecom — cовременная телекоммуникационная компания, развивающая на рынке Республики Казахстан широкополосный доступ к сети интернет в каждый дом, новую технологичную 5G мобильную связь, открытый доступ WI-FI в крупных городах.Компания представлена в 10 городах: в Астане, Туркестане, Шымкенте, Усть-Каменогорске, Атырау, Семее, Актау, Алматы, Конаеве и Таразе. Список городов присутствия постоянно расширяется.
Мы работаем в тесном сотрудничестве с мировыми производителями оборудования программного обеспечения.Экосистема
Freedom Telecom активно развивается в экосистеме международной инвестиционной группы компаний Freedom Holding Corp, которая является одной из крупнейших частных компаний Казахстана.КлиентыНашими клиентами являются физические лица, крупный, средний, малый бизнес и государственные учреждения Республики Казахстан.Основное преимущество нашей компании – внедрение комплексных решений в области телекоммуникаций. Принципами работы Freedom Telecom являются индивидуальные технические решения, новаторский подход, высокая квалификация сотрудников, гибкость в принятии решений, широкий спектр предоставляемых услуг и высокий уровень клиентоориентированности.

HeadHunter