Data Engineer (Команда RecSys)

Навыки

• Airflow
• CI/CD
• ClickHouse
• Дашборды и витрины
• Решения на данных
• Docker
• DWH

О компании и продукте

• Уровень Senior Требуемый опыт 3 + лет Откликнуться Поделиться. Технологии/инструменты SQL Python Docker Kafka CI/CD MongoDB ClickHouse Grafana Machine Learning Ищем Data Engineer в направлении рекомендаций, который будет совместно с нами строить пайплайны и развивать платформу данных

Задачи

• поддержка и разработка batch ETL-пайплайнов на Airflow для аналитических витрин и ML
• потоковая обработка данных с использованием Spark Streaming, Kafka, MongoDB
• развитие feature-store как инструмента, наполнение его фичами и интеграция данных для ML-моделей
• документирование, оптимизация и мониторинг пайплайнов и потоков данных
• Наш стек
• ClickHouse
• Spark (Spark Streaming, PySpark, Spark SQL)

Требования

• уверенное знание Python и SQL
• опыт построения ETL-процессов с использованием перечисленного стека
• В нашей команде коллеги быстро растут и получают опыт в разных задачах — от классического ETL для аналитических витрин до потоковой обработки в реальном времени для ML
• В Okko хорошо развиты data-driven-процессы: большое количество A/B-экспериментов, источников и витрин делает работу Data Engineer особенно важной
• Здесь ваш вклад реально виден: коллеги ценят результаты вашей работы, а ваши решения напрямую влияют на качество аналитики и эффективность ML-моделей
• В команде рекомендаций сейчас два Data Engineer, и мы ищем коллег, чтобы поддерживать текущий ритм разработки, а также развивать потоковую обработку данных и функциональность feature-store

Будет плюсом

• опыт работы с CI/CD, Docker, Grafana, базовые знания в области ML (обучение и инференс моделей, работа с feature-store)

Условия

• необходимое оборудование и софт для работы
• официальное трудоустройство
• ДМС со стоматологией, офисный врач, доплата больничного листа, корпоративные скидки
• льготные условия ипотеки в рамках зарплатного проекта
• бесплатная подписка на сервисы партнёров
• корпоративный спорт
• насыщенная корпоративная жизнь
• электронная библиотека издательства МИФ, в которую входят почти 2 тыс. единиц контента по бизнесу, саморазвитию, здоровому образу жизни и другим актуальным темам

Паспорт вакансии

История публикации

Откуда что взялось

Отмечено то, что вывели мы. Без пометки — значение назвал работодатель.

Почему на этом месте в выдаче

Порядок выдачи объявлен контрактом: свежесть решает между днями, полнота и зарплата — внутри дня.