Data Engineer (Big Data)

Навыки

• Airflow
• Big Data
• Data Lake
• Docker
• DWH
• ETL / ELT
• Git

О компании и продукте

• EvApps — IT-компания, разрабатывающая сложные цифровые продукты для бизнеса и госсектора. Работаем с российскими и зарубежными клиентами, развиваем IT-аутстаффинг с 2019 года. Обладатели золота Tagline Awards и лидеры Рейтинга Рунета.

Задачи

• Работа в продуктовой команде заказчика в формате аутстаффа
• Проектирование, разработка и развитие решений для интеграции и обработки данных
• Разработка и поддержка ETL-процессов и потоков данных
• Работа с Hadoop, HDFS, Hive и другими компонентами Big Data-экосистемы
• Работа с DWH, DataLake и реляционными базами данных
• Разработка отдельных компонентов интеграционных решений на Java или Groovy
• Написание и оптимизация SQL-запросов, анализ планов выполнения
• Сборка, контейнеризация и деплой решений с использованием Docker и Rancher
• Поддержка существующих решений, анализ и доработка чужого кода
• Работа с архитектурными схемами и технической документацией

Требования

• Опыт проектирования, разработки и поддержки интеграционных решений на Big Data-стеке
• Практический опыт работы с Hadoop
• Понимание устройства HDFS и форматов хранения данных
• Опыт работы с Hive или другим хранилищем на базе Hadoop
• Опыт работы с ETL-инструментами: Apache NiFi, Airflow, SAP BW, Talend, Informatica, SAS или аналогами
• Понимание принципов построения и хранения данных в DWH и DataLake
• Уверенное знание SQL: функции, индексы, анализ планов выполнения и оптимизация запросов
• Опыт работы с PostgreSQL, Oracle, MySQL, MS SQL, DB2 или другой реляционной базой данных
• Опыт программирования на Java или Groovy
• Знание принципов ООП и умение разбираться в чужом коде
• Опыт работы с Docker и Git через командную строку
• Умение читать архитектурные схемы и работать с технической документацией
• Готовность выйти на работу в максимально короткие сроки после получения оффера

Будет плюсом

• Опыт деплоя решений в Rancher
• Опыт администрирования Unix/Linux или Hadoop-кластера
• Опыт работы с Yarn, Ranger, Spark и ZooKeeper
• Знание Zabbix и Ansible

Условия

• Аутстафф в сильной продуктовой команде
• Офис в Туле или удалённая работа
• Оформление по ТК РФ
• IT-ипотека и отсрочка от армии
• Компенсация спорта и обучения
• Внутренние онлайн-мероприятия, корпоративные чаты и обмен экспертизой — даже в аутстаффе вы остаётесь частью нашей команды, а не «ресурсом на проекте»

Паспорт вакансии

История публикации

Откуда что взялось

Отмечено то, что вывели мы. Без пометки — значение назвал работодатель.

Почему на этом месте в выдаче

Порядок выдачи объявлен контрактом: свежесть решает между днями, полнота и зарплата — внутри дня.