Data Engineer (Middle+)

Нур-Султан
Постоянная работа
Полная занятость

21 д. назад

ДОБРЫЙ ДЕНЬ, УВАЖАЕМЫЙ КАНДИДАТ!На сегодняшний день мы, Команда Мечты, ищем Middle Data Engineer / Middle Strong Data Engineer.прошу написать сопроводительное письмо, почему именно вы подходите на эту роль.ЧЕМ ВЫ БУДЕТЕ ЗАНИМАТЬСЯ:Архитектура и развитие платформы данныхОпределять стандарты построения и поддержки ETL/ELT пайплайновВыбирать технологии и инструменты под задачи масштабирования и устойчивостиУчаствовать в формировании roadmap развития дата-инфраструктурыETL и оркестрацияРазрабатывать и поддерживать надёжные ETL-процессы с использованием Apache AirflowОптимизировать пайплайны данных (retry, SLA, logging, alerting)Контейнеризировать процессы и управлять деплоем через KubernetesОрганизовывать хранение и обработку данных в S3 Data LakeМоделирование и трансформации данныхРазрабатывать и документировать модели dbt для DWHНастраивать CI/CD для автоматического тестирования и развертывания моделейРеализовывать принципы Data Quality (dbt tests, data contracts, Great Expectations)Хранилище данных (DWH и NoSQL)Проектировать и оптимизировать хранилища данных на PostgreSQL и ClickHouseРазрабатывать агрегированные витрины и аналитические таблицыПоддерживать прозрачность и воспроизводимость данных (data lineage, observability)Интеграции и стриминг данныхРазрабатывать коннекторы и интеграции с внешними источниками (REST API, JSON, OAuth)Настраивать стриминг данных через Apache KafkaОбеспечивать надёжную доставку и трансформацию потоковых данныхИнфраструктура и автоматизацияНастраивать мониторинг и алерты (Prometheus, Grafana, ELK)Контролировать производительность, отказоустойчивость и безопасность дата-процессовУчастие в развитии командыПроводить code review, внедрять инженерные стандарты и best practicesМенторить менее опытных инженеров и помогать в развитии командыРаботать в тесном взаимодействии с аналитиками и Data ScientistsЧЕГО МЫ ОТ ВАС ОЖИДАЕМ:Опыт работы от 2 лет в роли Data Engineer
Глубокие знания SQL и опыт работы с PostgreSQL, ClickHouse
Опыт разработки и поддержки пайплайнов в Apache Airflow
Опыт работы с dbt (модели, макросы, тестирование)
Уверенные знания Python (pandas, requests, sqlalchemy)
Опыт интеграции с REST API
Знание принципов OLAP / OLTP, DWH архитектуры и ETL-дизайна
Опыт работы с Kafka, Kubernetes, S3, NoSQL
Понимание CI/CD и автоматизации инфраструктурыБудет плюсом:Опыт работы со стриминговыми пайплайнами (Kafka Connect, Spark Streaming, Flink)
Опыт в облачных платформах (AWS / Azure / GCP)
Навыки настройки мониторинга (Prometheus, Grafana, ELK)
Опыт работы с BI-инструментами (Superset, Metabase, Tableau)
Участие в проектировании Data Governance и ObservabilityЧТО МЫ ПРЕДЛАГАЕМ:

Конкурентоспособная заработная плата (обговаривается при собеседовании);
Высокий уровень автономности;
Минимум бюрократии;
Разноплановые проекты;
Сложные задачи и вызовы;
Своя кухня;
Компенсация участия в конференциях;
Своевременная выплата З/П;
Комфортные условия работы;
График работы:Офисный формат (full-time, on-site), г. Астана, ул. Сарайшык 7/7.

5/2, с 8:00 до 17:00 (обед с 12:00 до 13:00).Мы - специализированная торговая сеть магазинов электроники и бытовой техники «Mechta.kz», Компания основана в 1992 году.Наша Миссия « Занимаясь любимым делом, мы приносим комфорт и радость в вашу жизнь».На сегодняшний день Компания является одной из ведущих торговых сетей по продаже электроники и бытовой техники в Казахстане. У нас широкий ассортимент товаров - от трёх до десяти тысяч наименований в каждом магазине. Мы продаём только сертифицированную технику мировых брендов с заводской гарантией и последующим сервисом.Наш девиз «Качество во всём!»Головной офис Компании находится в г. Астане, сеть насчитывает более 90 магазинов по всему Казахстану.На данный момент штат Компании составляет более 3 000 сотрудников, и мы постоянно растём.Наши ценности:-Честность;- Командный дух,- Свобода, ответственность, гибкость;- Лидерство и смелость;- Креативность и новаторство;- Профессионализм;- ОтветственностьМы ценим наших сотрудников и способствуем их карьерному росту, более 95% топ-менеджеров и руководителей структурных подразделений в Компании начинали свою карьеру с линейного персонала.Обучения, Корпоративный отдых, тимбилдинги, участие в спортивных соревнованиях это неотъемлемая часть нашей корпоративной культуры.Будем рады видеть у себя в команде тебя!Добро пожаловать!

HeadHunter

Откликнуться