Разработчик на С++ в службу разработки динамических таблиц YTsaurus

Навыки

• C++
• Анализ данных
• Дисциплина
• Go
• Python
• SLA
• Разбор обращений

О компании и продукте

• Наша команда занимается разработкой и поддержкой сервиса YTsaurus в Яндексе и старается применять на практике лучшие идеи из областей разработки и эксплуатации больших систем. Чтобы работа сервиса динтаблиц YTsaurus стала более эффективной и надёжной, мы ищем SRE-инженера с фокусом на performance engineering. Руслан Савченко. Руководитель службы разработки динамических таблиц. Динтаблицы YTsaurus — это многопользовательская NewSQL-СУБД, развёрнутая на тысячи машин и обслуживающая много пользователей и проектов внутри Яндекса. К сервису предъявляются высокие требования по доступности и времени отклика
• Это может быть оптимизация кода, добавление новых механизмов квотирования или перестраивание существующих процессов — как показывает практика, в проблемах эксплуатации не всегда можно ограничиться каким-то одним подходом. Какие задачи вас ждут Оптимизация потребления CPU. Архитектурно YTsaurus состоит из нескольких компонентов, каждый из которых реализован в парадигме тредпулов и файберов. Это не всегда эффективно и надёжно по CPU: во-первых, перемещение файбера между тредпулами приводит к задержкам, и при перегрузках эти задержки могут быть очень высоки, а во-вторых, конфигурация с выделенными тредпулами плохо подходит для запуска в контейнерах с малым числом ядер

Задачи

• Разработчик на С++ в службу разработки динамических таблиц YTsaurus
• Динтаблицы можно использовать там, где ответ нужно получить за миллисекунды, а данные должны быть доступными при обновлениях и внезапных отключениях одной из локаций
• Эксплуатация такой большой и нагруженной системы требует, с одной стороны, хорошо построенных процессов надёжности, а с другой — большого количества низкоуровневых оптимизаций и выстроенных на разных уровнях степеней защиты от сбоев и перегрузок
• Задачи по созданию таких решений относят к областям Site Reliability Engineering и Performance Engineering
• Вам предстоит разбираться с узкими местами работы системы, в том числе на стыке взаимодействия с операционной системой и железом, и вырабатывать решения, нацеленные на устранение этих узких мест
• Вам предстоит разобраться во внутренней архитектуре и оптимизировать сервис, чтобы снизить время обработки запросов
• Диагностика задержек в сети
• Запросы в YTsaurus выполняются распределённо и, следовательно, чувствительны к сетевым задержкам
• По имеющимся инструментам сложно понять, на каком уровне происходит задержка: где-то в стеке на стороне YTsaurus или в нижележащей инфраструктуре
• Вам нужно реализовать средство мониторинга сетевых задержек на стороне YTsaurus, чтобы можно было понять, на какой стороне нужно искать причину долгой передачи данных
• Внедрение SLA
• Придумать и внедрить SLA для сервиса управления базами данных — непростая и творческая задача
• Вам совместно с другими разработчиками предстоит придумать и внедрить контракт, который был бы понятен как эксплуатации YTsaurus, так и сервисам, хранящим свои базы данных в YTsaurus
• Больше о бэкенде в Яндексе — в канале Yandex for Backend

Требования

• Умеете программировать на C++, готовы писать на Go и Python
• Любите погружаться в особенности работы операционной системы и железа
• Нацелены на построение надёжного сервиса для пользователей
• От 3 лет

Будет плюсом

• Работали с низкоуровневыми оптимизациями
• Знакомы с bpftools
• Знаете теорию SRE и то, как выстраиваются SRE-процессы
• Офисы в Москве
• Как в Яндексе проходят алгоритмические секции собеседований
• Как мы нанимаем бэкенд-разработчиков
• Задачи для подготовки к собеседованиям

Условия

• Гибридный
• Удалённая работа
• Я Руслан Савченко, руководитель разработки динтаблиц YTsaurus
• Возможно, мы уже знакомы по курсам в Школе анализа данных (ШАД), интенсиву SRE Week или пересекались на конференции

Паспорт вакансии

История публикации

Откуда что взялось

Отмечено то, что вывели мы. Без пометки — значение назвал работодатель.

Почему на этом месте в выдаче

Порядок выдачи объявлен контрактом: свежесть решает между днями, полнота и зарплата — внутри дня.