Старший разработчик Hadoop/Cloudera в городе Москва с опытом работы от 1 года до 3 лет

Навыки

• Airflow
• Проектирование архитектуры
• CI/CD
• DWH
• Git
• Hadoop
• HBase / Hive

О компании и продукте

• Предприятие. Москва, НЛМК-Информационные технологии
• Мы создаем совершенную сталь для ключевых отраслей: от строительства до ветроэнергетики. Разрабатываем новые технологии и внедряем передовые цифровые решения. Заботимся о сотрудниках и создаем возможности для их развития и самореализации. Создаем настоящее будущее

Задачи

• Развивать и поддерживать хранилище данных на базе Hadoop/Cloudera
• Проектировать структуру хранения, обеспечивать масштабируемость и собирать данные из разных источников
• Писать и поддерживать пайплайны на Airflow и Python для автоматизированной загрузки и обновления данных, следить за стабильной работой всего процесса
• Разрабатывать SQL-скрипты под Impala для извлечения, обработки и трансформации данных, помогать аналитикам и продуктовым командам получать нужные данные быстро и стабильно
• Участвовать в проработке архитектурных решений по развитию платформы данных и предлагать улучшения по организации хранения, обработке и использованию данных
• Работать вместе с другими дата-инженерами, аналитиками и разработчиками, делиться опытом и выстраивать эффективные практики работы с данными
• Старший разработчик Hadoop/Cloudera

Требования

• Уверенное знание Python и опыт разработки надёжных и поддерживаемых data pipeline’ов, преимущественно с использованием Apache Airflow
• Понимание принципов работы хранилищ данных, знание Hadoop/Cloudera, Hive и Impala или желание быстро освоить аналогичные технологии
• Отличное владение SQL, с умением писать читаемые и эффективные запросы под большие объёмы данных
• Опыт работы с Git, CI/CD, Linux и знание базовых инструментов мониторинга и автоматизации
• Готовность осваивать новые инструменты и технологии под задачи команды, не ограничивая себя текущим стеком
• Работа в группе НЛМК - это
• Возможен удаленный формат работы
• Работа в международной сталелитейной компании с активами в России, США и странах Европы, с развитыми корпоративными ценностями и стандартами
• Открытая корпоративная культура для новых идей и предложений (Банк идей)
• Высокие стандарты безопасности труда и культуры производства
• Уникальные технологические и инновационные проекты
• Программа бесплатных консультаций юриста, эксперта по здоровому образу жизни, психолога и финансового советника
• Возможности для саморазвития и обучения – собственный
• Корпоративный и технологический университет, электронные библиотеки МИФ, Альпина
• Диджитал, участие в конференциях, развитие наставничества и менторинга, содействие в повышении квалификации, программы профессионального и карьерного развития, изучение иностранного языка по специальным условиям для сотрудников компании
• Спортивные и культурные мероприятия (спортивные игры, день металлурга, юбилейные даты общества, Новый год)
• Программа бесплатных консультаций юриста, психолога, финансового советника, эксперта по ЗОЖ, ветеринара для питомцев
• Материальная помощь по важным событиям сотрудника а также находящимся в трудной жизненной ситуации
• Опыт работы
• От 1 года до 3 лет
• Полный день

Условия

• Полная занятость
• Группа НЛМК крупнейший в России и один из самых эффективных в мире производителей стальной продукции
• Производственные активы в России, Европе, Азии и США
• Оформление по ТК РФ, ежегодная индексация заработной платы, прозрачная система премирования
• Корпоративные льготы: корпоративная сотовая связь, летние путёвки для детей, новогодние детские подарки, программы лояльности от партнеров, частичная компенсация стоимости питания , материальная поддержка сотрудников в различных жизненных ситуациях
• Программы заботы о здоровье: (ДМС, страхование от НС и профессиональных заболеваний, вакцинация)

Паспорт вакансии

История публикации

Откуда что взялось

Отмечено то, что вывели мы. Без пометки — значение назвал работодатель.

Почему на этом месте в выдаче

Порядок выдачи объявлен контрактом: свежесть решает между днями, полнота и зарплата — внутри дня.