Senior Data Engineer

Freedom Finance Global

  • Алматы
  • Постоянная работа
  • Полная занятость
  • 6 д. назад
Обязанности:
  • Проектировать, развивать и поддерживать ETL / ELT-пайплайны для загрузки и трансформации данных из различных источников;
  • Строить и оптимизировать архитектуру хранилища данных (Greenplum): схемы, витрины, партиционирование, распределение данных;
  • Разрабатывать и сопровождать DAG’и в Airflow (TaskFlow API, динамические пайплайны, ретраи, SLA, мониторинг);
  • Разрабатывать и поддерживать сервисы на FastAPI для: реализации API-интерфейсов к данным и витринам интеграции с внешними системами и микросервисами реализации webhook’ов, callback’ов, CDC-эндпоинтов;
  • Настраивать и поддерживать CDC-интеграции с использованием Debezium, Kafka или аналогичных инструментов;
  • Проектировать стриминговые и батч-потоки данных, обеспечивать их устойчивость и масштабируемость Использовать PXF для интеграции Greenplum с внешними источниками данных (PostgreSQL, файловые системы, object storage и др.);
  • Оптимизировать производительность загрузок, запросов и структуры хранения данных;
  • Обеспечивать качество данных (DQ): контроль полноты, консистентности, дедупликации и SLA загрузок;
  • Взаимодействовать с аналитиками и BI-разработчиками при проектировании витрин и источников данных;
  • Участвовать в стандартизации пайплайнов, код-ревью и развитии инженерных практик Документировать архитектуру, процессы и принятые технические решения.
Требования:
  • Высшее образование в сфере ИТ, математики, инженерии или смежных областях;
  • Опыт работы от 3 лет, участие в построении или развитии корпоративных DWH / Data Platform;
  • Отличное владение SQL (оптимизация запросов, работа с большими объёмами данных, понимание MPP-архитектур);
  • Уверенные навыки Python (ETL-логика, автоматизация, работа с API);
  • Практический опыт работы с Airflow Опыт работы с Greenplum, понимание принципов MPP, партиционирования и распределения данных;
  • Практический опыт разработки сервисов на FastAPI: проектирование REST API валидация данных (Pydantic) асинхронная обработка интеграция с БД и внешними сервисами;
  • Опыт построения CDC / стриминговых пайплайнов (Debezium, Kafka или аналогичные решения);
  • Понимание архитектуры событийных систем и потоковой обработки данных;
  • Опыт взаимодействия с BI-инструментами как потребителями данных (Qlik Sense).
Условия:
  • Профессиональный коллектив;
  • Неограниченный рост;
  • Скидки на фитнес, подарки на праздники и дни рождения;
  • Бонусы и уникальные предложения от компаний холдинга;
  • Спонсирование профессионального обучения;
  • Насыщенная корпоративная жизнь с выездами на природу, праздничными мероприятиями в офисе, играми и розыгрышами подарков.
Инвестиционная компания, предоставляющая брокерское обслуживание, доверительное управление ценными бумагами и доступ к фондовым рынкам Казахстана, России, США. Группа компаний «Фридом Финанс» была основана в 2008 году. Сегодня собственные средства группы превышают $110 000 000, а суммарные клиентские активы составляют порядка $1 млрд. Команда экспертов «Фридом Финанс» осуществляет полноценную поддержку работы клиентов на биржах: начиная от генерации инвестиционных идей, аналитического сопровождения заканчивая помощью в учете торговых операций и консультациями специалистов. В компании действует современный учебный центр, в котором можно пройти уникальные курсы по работе на рынке ценных бумаг.Наши принципы:1. Долгосрочное партнерство с клиентами
Главная ценность любой компании – клиенты. Развитие бизнеса «Фридом Финанс» напрямую зависит от успешности инвестиционной деятельности наших клиентов. Мы считаем вас своими партнерами и заинтересованы в вашем развитии и росте благосостояния. Только совместные усилия помогают нам достигать общих целей и быть успешными на современном рынке.
2. Честность и открытость
Мы работаем с нашими партнерами, контрагентами добросовестно и открыто. «Фридом Финанс» всегда исполняет свои обязательства и предоставляет полную информацию об операциях и возможностях финансового рынка. Мы гордимся тем, что каждый третий клиент обращается к нам по рекомендации.
3. Создание цивилизованного рынка
Эффективный финансовый рынок строится на здоровой конкуренции, прозрачности, разумных ожиданиях участников и эффективном государственном регулировании. Для того чтобы фондовый рынок Казахстана динамично развивался, нужны совместная работа и взаимное доверие всех его участников.
Мы тесно сотрудничаем с финансовым регулятором, Казахстанской фондовой биржей и другими участниками рынка. Благодаря совместной работе мы создаем надежные механизмы инвестирования, приносим на рынок новые инструменты, развиваем культуру инвестирования.
4. Профессионализм и ответственность
Работа на финансовом рынке требует высочайшего уровня ответственности и продуманной инфраструктуры. Кандидаты на вакантные должности проходят тщательный отбор, в результате которого в компании остаются работать только профессиональные сотрудники. Наш персонал проходит систематическое обучение в корпоративном университете, участвует в отраслевых конференциях и семинарах. Мы являемся экспертами фондового рынка и всегда готовы поделиться своими знаниями. Наши инвестиционные консультанты ведут блоги на известных казахстанских порталах, комментируют события, происходящие на фондовом рынке, и в экономике в целом.
5. Стремление к инновациям
Мы вкладываем большие средства в развитие своего сервиса, организовываем образовательные проекты, переводим иностранные книги по инвестициям и пишем свои.
Мы инвестируем средства в разработку автоматизированных IT-систем, в надежность связи, в развитие роботизированных аналитических систем, применяемых нашими трейдерами. Мы создали целый ряд уникальных технологий, дающих нам серьезное преимущество перед конкурентами. «Фридом Финанс» не останавливается на достигнутом.

HeadHunter