• Вакансии
• Data Engineer

опубликована: 20 октября 2023

5.0

**SM Lab** - аккредитованная ИТ компания в составе группы компаний «Спортмастер», которая строит свою работу на современных принципах управления разработкой и актуальном стеке. Мы делаем ИТ системы, на которые опирается наш бизнес, благодаря которым он растет и развивается. Направления: "Цифровая аналитика", "Антифрод", " Платформа DataLake". **Стек:** Ванильный hadoop; Kafka, Spark, Airflow; ClickHouse; Jira; Confluence; GitLab. **Задачи:** - Реализация ETL в Hadoop (с помощью Airflow); - Работа с различными источниками данных: Oracle, MS SQL, API личных кабинетов, микросервисы; - Батч и стримы с помощью PySpark и Kafka; - Подготовка витрин для анализа (Hive + Spark + SQL). **Must-Have:** - Python; - Hadoop: HDFS, Apache AirFlow, Hive, Kafka,Spark; - SQL; - Oracle. **Мы предлагаем:** - Удаленку или офис (МСК, м. Дмитровская); - Профессиональное развитие; - Дисконт 30% (Sportmaster, Ostin, Funday).