Чем предстоит заниматьсяПроектировать, развивать и оптимизировать платформы хранения и обработки данных (DWH и Data Lake)Реализовывать надёжные, масштабируемые и повторяемые ETL/ELT-процессыИнтегрировать данные из различных источников (БД, API, файловые хранилища и др.)Оптимизировать SQL-запросы и организацию хранения данных в соответствии с потребностями аналитикиРазрабатывать стриминговые процессы обработки данных на базе Apache Flink и PythonВнедрять лучшие практики в области качества данных, мониторинга и информационной безопасностиЧто важно знать и уметьУверенные знания принципов построения архитектуры хранилищ данных (DWH) и многомерного моделированияПродвинутый уровень SQL: оконные функции, анализ и оптимизация планов выполнения, стратегии соединенийОпыт работы с Hadoop/S3 и различными форматами хранения (Parquet, Avro, ORC)Практический опыт использования Apache Airflow для оркестрации процессовНавыки интеграции данных из PostgreSQL, Oracle, API, S3, FTP/NFS и других источниковВладение Python для написания скриптов и утилитУверенная работа в Linux-среде: bash, работа с логами, автоматизация, диагностикаСистемное мышление и самостоятельный подход к решению задачБудет плюсомПонимание архитектуры Apache KafkaОпыт работы с Apache Flink, знание Java на базовом уровнеОпыт использования Apache SparkЗнание принципов CDC и опыт работы с инструментами Oracle GoldenGate, DebeziumНавыки работы с Docker, Kubernetes, CI/CD и GitОпыт построения отчётности и визуализации данных (Superset, Power BI и др.)АО «Кселл» — это большая дружная команда профессионалов, которая с 1998 года каждый день помогает людям оставаться на связи со своими друзьями и родными, решать проблемы, а иногда даже спасать жизни людей.Компания предоставляет услуги голосовой связи, передачи данных, дает доступ к мультимедийным и мобильным финансовым сервисам с помощью своей обширной высококачественной сети, которая охватывает практически всю территорию Республики Казахстан.А все сервисы Компании в экосистеме объединяет первое среди операторов связи суперприложение (https://profit.kz/articles/14726/Kak-kompaniya-Kcell-razvivaet-svou-ekosistemu/).Более 7 миллионов абонентов доверяют нам каждый день!
