Junior · Удалённо из России · Москва, Россия · Английский не нужен
Навыки
Agile
AI-агенты
API (интеграции)
Дашборды и витрины
Git
База знаний
LLM
Ещё 7
Pandas
Prompt engineering
Python
RAG
SQL
SQL: оконные функции, CTE
Автоматизация тестирования
О компании и продукте
27 июля 2026 • г Москва • ПАО Сбербанк • Информационные технологии:Менеджер продукта
Дирекция мониторинга Agile занимается созданием дашборда для руководителей в Сбере. Мы собираем данные по всем процессам в Банке, анализируем их и предоставляем необходимую информацию для принятия решений.
Мы продолжаем увеличивать охват и глубину мониторинга, поэтому нуждаемся в новых силах. Мы ищем в команду Prompt инженера, который будет создавать данные и описание запроса для LLM-моделей, и следить за их качеством работы.
Задачи
разработка и оптимизация диалоговых сценариев, сложных запросов (prompt-engineering) и примеров ответов для взаимодействия с LLM
оценка качества ответов моделей (ручная и автоматическая), их корректировка, фактчекинг, проверка на этичность и достоверность
формирование, систематизация и разметка обучающих данных для улучшения качества моделей
внедрение и оптимизация RAG-систем, включая интеграцию векторных баз данных (Pinecone, FAISS) и оценку проведение A/B-тестирования промптов, моделей и подходов к генерации
разработка и поддержка базы знаний для LLM, включая актуализацию контента
обеспечение мониторинга работы AI-систем, выявление проблемных зон и в разных этапах работы системы
написание автотестов для проверки стабильности и качества систем на каждом этапе
создание инструкций и рекомендаций по использованию AI в различных сценариях
мониторинг трендов в области AI, оценка новых инструментов и технологий
Требования
опыт от 1 года в prompt-инжиниринге или в разработке AI-агентов
глубокое понимание LLM (GPT, Llama 2, BERT) и опыт работы с их API
умение калибровать параметры генерации (temperature, top-p, guidance и другие)