ML-аналитик в команду Вселенной ассистентов

Навыки

Обязанности

• 01Создавать и прокачивать систему оценки ассистента — от создания корзинок с запросами и разработки метрик до анализа результатов и добавления фич в продукт
• 02Организовывать разметку качества руками краудсорсеров и строить автоматизированные пайплайны с LLM-as-a-Judge
• 03Рассчитывать продуктовые метрики и организовывать регулярную отчетность по продукту
• 04Искать инсайты в пользовательских диалогах, придумывать эксперименты и предлагать, как еще улучшить качество нашего продукта
• 05Собирать данные для алаймента нашей языковой модели под задачи ассистентов

Требования

• 01У вас есть опыт на границе продуктовой аналитики и Data Science: чат-боты, рекламные аукционы, поисковые системы, генеративные технологии
• 02Владеете SQL и Python на уверенном уровне, в приоритете Pandas
• 03Умеете писать хороший аналитический продакшен-код
• 04Хотите работать с текстовыми данными в LLM-продуктах
• 05Пользуетесь LLM в работе и жизни
• 06Будут плюсом самостоятельные pet-проекты с ML- и LLM-агентами, понимание современных подходов к оценке LLM: LLM-as-a-Judge, инструкции для разметчиков, офлайн- и онлайн-эксперименты, human-in-the-loop

Условия

• 01Гибридный график и офис у метро «Белорусская»
• 02Возможность работы в аккредитованной ИТ-компании
• 03ДМС со стоматологией, включая чекапы, компенсацию покупки лекарств и льготные условия страхования для близких
• 04Страховка от несчастных случаев и болезней
• 05Рост по карьерному треку: проходите курсы по софт- и хард-скиллам, развивайтесь с поддержкой ментора и повышайте уровень с матрицей компетенций и регулярным ревью
• 06Сильное комьюнити. Вы будете работать с экспертами в своей области, сможете делиться знаниями и выступать на конференциях, посещать митапы и писать статьи
• 07Онлайн-консультации с психологами, юристами, специалистами по финансам и здоровому образу жизни
• 08Компенсацию затрат на спортивные абонементы, приложение Т-Спорта для онлайн-занятий и командные тренировки с коллегами
• 09Завтраки и обеды в Т-Кафе
• 103 дополнительных дня к отпуску — можно использовать для отдыха или получить компенсацию
• 11Специальные тарифы на продукты Т-Банка и широкую программу скидок от партнеров
• 12Достойную зарплату — обсудим ее на собеседовании