Senior Data Engineer / team lead

Mechta.kz

  • Нур-Султан
  • Постоянная работа
  • Полная занятость
  • 5 д. назад
ДОБРЫЙ ДЕНЬ, УВАЖАЕМЫЙ КАНДИДАТ!На сегодняшний день мы, Команда Мечты, ищем Senior Data Engineer / team lead.
прошу написать сопроводительное письмо, почему именно вы подходите на эту роль.ЧЕМ ВЫ БУДЕТЕ ЗАНИМАТЬСЯ:Архитектура и развитие платформы данныхПроектировать и развивать архитектуру Data Platform компанииОпределять стандарты построения и поддержки ETL/ELT пайплайновВыбирать технологии и инструменты под задачи масштабирования и устойчивостиУчаствовать в формировании roadmap развития дата-инфраструктурыETL и оркестрацияРазрабатывать и поддерживать надёжные ETL-процессы с использованием Apache AirflowОптимизировать пайплайны данных (retry, SLA, logging, alerting)Контейнеризировать процессы и управлять деплоем через KubernetesОрганизовывать хранение и обработку данных в S3 Data LakeМоделирование и трансформации данныхРазрабатывать и документировать модели dbt для DWHНастраивать CI/CD для автоматического тестирования и развертывания моделейРеализовывать принципы Data Quality (dbt tests, data contracts, Great Expectations)Хранилище данных (DWH и NoSQL)Проектировать и оптимизировать хранилища данных на PostgreSQL и ClickHouseРазрабатывать агрегированные витрины и аналитические таблицыИнтегрировать и работать с NoSQL-базами (MongoDB, Redis, Cassandra и др.)Поддерживать прозрачность и воспроизводимость данных (data lineage, observability)Интеграции и стриминг данныхРазрабатывать коннекторы и интеграции с внешними источниками (REST API, JSON, OAuth)Настраивать стриминг данных через Apache Kafka (producers/consumers, топики, партиционирование)Обеспечивать надёжную доставку и трансформацию потоковых данныхИнфраструктура и автоматизацияАвтоматизировать развёртывание и конфигурацию инфраструктуры (Terraform, Helm)Настраивать мониторинг и алерты (Prometheus, Grafana, ELK)Контролировать производительность, отказоустойчивость и безопасность дата-процессовУчастие в развитии командыПроводить code review, внедрять инженерные стандарты и best practicesМенторить менее опытных инженеров и помогать в развитии командыРаботать в тесном взаимодействии с аналитиками и Data ScientistsЧЕГО МЫ ОТ ВАС ОЖИДАЕМ:
  • Опыт работы от 3 лет в роли Senior Data Engineer
  • Глубокие знания SQL и опыт работы с PostgreSQL, ClickHouse
  • Опыт разработки и поддержки пайплайнов в Apache Airflow
  • Опыт работы с dbt (модели, макросы, тестирование)
  • Уверенные знания Python (pandas, requests, sqlalchemy)
  • Опыт интеграции с REST API
  • Знание принципов OLAP / OLTP, DWH архитектуры и ETL-дизайна
  • Опыт работы с Kafka, Kubernetes, S3, NoSQL
  • Понимание CI/CD и автоматизации инфраструктуры (Terraform / Helm)
Будет плюсом:
  • Опыт работы со стриминговыми пайплайнами (Kafka Connect, Spark Streaming, Flink)
  • Опыт в облачных платформах (AWS / Azure / GCP)
  • Навыки настройки мониторинга (Prometheus, Grafana, ELK)
  • Опыт работы с BI-инструментами (Superset, Metabase, Tableau)
  • Участие в проектировании Data Governance и Observability
ЧТО МЫ ПРЕДЛАГАЕМ:
  • Конкурентоспособная заработная плата (обговаривается при собеседовании);
  • Высокий уровень автономности;
  • Минимум бюрократии;
  • Разноплановые проекты;
  • Сложные задачи и вызовы;
  • Своя кухня;
  • Компенсация участия в конференциях;
  • Своевременная выплата З/П;
  • Комфортные условия работы;
  • График работы: 5/2, с 8:00 до 17:00, обед с 12:00 до 13:00.
Мы - специализированная торговая сеть магазинов электроники и бытовой техники «Mechta.kz», Компания основана в 1992 году.Наша Миссия « Занимаясь любимым делом, мы приносим комфорт и радость в вашу жизнь».На сегодняшний день Компания является одной из ведущих торговых сетей по продаже электроники и бытовой техники в Казахстане. У нас широкий ассортимент товаров - от трёх до десяти тысяч наименований в каждом магазине. Мы продаём только сертифицированную технику мировых брендов с заводской гарантией и последующим сервисом.Наш девиз «Качество во всём!»Головной офис Компании находится в г. Астане, сеть насчитывает более 90 магазинов по всему Казахстану.На данный момент штат Компании составляет более 3 000 сотрудников, и мы постоянно растём.Наши ценности:-Честность;- Командный дух,- Свобода, ответственность, гибкость;- Лидерство и смелость;- Креативность и новаторство;- Профессионализм;- ОтветственностьМы ценим наших сотрудников и способствуем их карьерному росту, более 95% топ-менеджеров и руководителей структурных подразделений в Компании начинали свою карьеру с линейного персонала.Обучения, Корпоративный отдых, тимбилдинги, участие в спортивных соревнованиях это неотъемлемая часть нашей корпоративной культуры.Будем рады видеть у себя в команде тебя!Добро пожаловать!

HeadHunter