Senior DevOps Engineer (DWH/ML Platform)

Навыки

• Airflow
• ArgoCD / Flux
• AWS
• CI/CD
• ClickHouse
• Data Lake
• DWH

О компании и продукте

• Ищем DevOps-инженера, который не просто «держит прод», а строит масштабируемую платформу для работы с данными

Задачи

• Развитие Kubernetes-платформы (EKS)
• Написание и поддержка сложных Helm-чартов для stateful-приложений (Trino, ClickHouse, Solr, ScyllaDB)
• Управление ресурсами, автомасштабированием (HPA/VPA, Cluster Autoscaler, Karpenter)
• Настройка сетевых политик, Ingress, service mesh при необходимости
• Infrastructure as Code
• Полное описание инфраструктуры через Terragrunt: EKS-кластеры, VPC, IAM, S3, RDS и др
• Поддержка принципа DRY, управление стейтами в AWS S3
• Структурирование кода для нескольких окружений (dev/stage/prod)
• CI/CD пайплайны
• Построение процессов доставки кода и данных через GitLab CI
• Настройка GitLab Runners (в т.ч. на Kubernetes), кэширование артефактов
• Автоматизация тестирования инфраструктуры, Helm-чартов и Terraform-модулей
• Observability
• Настройка сбора метрик через Prometheus (ServiceMonitors, PodMonitors, Exporters)
• Визуализация в Grafana: дашборды для Data-компонентов и инфраструктуры
• Настройка алертинга для критичных сценариев: лаг репликации, очередь задач Spark/Airflow, утилизация ресурсов
• Централизованный сбор логов
• Data Ops
• Поддержка кластеров Trino и Spark, обеспечение их взаимодействия с S3 (Iceberg) и базами данных (Solr, ScyllaDB)
• Настройка Airflow на Kubernetes Executor, помощь DE-команде с инфраструктурными вопросами
• Участие в работе с инцидентами
• ML Support
• Обеспечение стабильной работы сервисов ML (Solr, ScyllaDB, Redis) в продакшене
• Поддержка инфраструктуры для MLflow, Feast, inference-сервисов
• Что хотим видеть

Паспорт вакансии

История публикации

Откуда что взялось

Отмечено то, что вывели мы. Без пометки — значение назвал работодатель.

Почему на этом месте в выдаче

Порядок выдачи объявлен контрактом: свежесть решает между днями, полнота и зарплата — внутри дня.