яндекс

ML-аналитик в Мою Память Алисы

яндекс · На сервисе с: 18.08.26 16:03

Зарплата не указанаРоссияМосква

Алиса помогает миллионам людей решать повседневные задачи. В команде Алисы AI мы строим Мою Память — единое место для того, что важно пользователю: заметок, дел, списков, планов и файлов. Но наша цель — не просто сделать ещё один заметочник. Мы создаём контекстный слой Алисы: пользователь сможет без лишних усилий сохранить важное, найти это обычными словами и получить нужный контекст в подходящий момент — в чате, с помощью колонки или на другом устройстве с Алисой.

Например:

«Запомни код домофона»

«Добавь молоко в список покупок»

«Что педиатр написал про витамин D?»

«Напомни записаться к врачу через две недели»


В основе сценария — LLM, которая понимает намерение пользователя, вызывает нужные инструменты для создания, поиска и изменения записей и формирует итоговый ответ. Здесь особенно важны точность и надёжность: Алиса не должна забывать сохранить обещанное, менять не ту запись или уверенно говорить о действии, которого не произошло.

Ищем ML-аналитика, который поможет нам измерять и системно улучшать качество Моей Памяти — от первого решения модели до результата, который увидит пользователь.

Создание системы оценки качества AI-продукта

Вы будете формировать целостную картину качества сценария: определять ключевые метрики и раскладывать их по этапам — роутинг, поиск контекста, вызов инструментов, итоговый ответ и доставка результата. Нужно будет связывать офлайн-оценку моделей с поведением продукта в реальном потоке, проектировать мониторинги и дашборды, которые помогают вовремя замечать деградации. Предстоит находить срезы, в которых общая метрика скрывает проблемы: разные устройства, интенты, типы записей и сложность диалога.

Приёмка новых моделей и изменений

Вместе с ML-разработчиками, продуктом и редакторами вы будете отвечать на практический вопрос: можно ли выпускать новую модель пользователям? Для этого предстоит: собирать репрезентативные eval-наборы и приёмочные корзинки, сравнивать версии моделей и разбирать регрессии, развивать LLM-as-a-judge и проверять его согласованность с человеческой оценкой. Нужно будет определять критерии готовности к эксперименту и запуску, проводить постанализ после выкладки и проверять, подтвердился ли ожидаемый эффект.

Разбор ошибок модели и поиск точек роста

Вам предстоит много работать с живыми пользовательскими сценариями и текстовыми логами. Ваши задачи — искать срабатывания false positive и false negative; разбирать DSAT и проблемные диалоги; кластеризовать ошибки и отделять проблемы намерения, retrieval, tool calling и генерации ответа. Нужно будет выявлять повторяющиеся паттерны через data mining и эвристики, превращать наблюдения в проверяемые продуктовые и ML-гипотезы, оценивать масштаб проблемы и ожидаемый эффект исправления.

Подготовка данных для улучшения моделей и проверка изменений онлайн
Вы будете участвовать во всём цикле улучшения качества: формировать выборки для обучения, валидации и независимой приёмки; следить за покрытием сценариев и смещениями в данных; помогать определять разметку и таксономию ошибок. Нужно будет оценивать качество датасетов и автоматической разметки, делать воспроизводимые исследования, которыми сможет пользоваться вся команда.

После офлайн-приёмки предстоит оценивать работу продукта на реальных пользователях: проектировать и анализировать A/B-эксперименты, интерпретировать изменения продуктовых и качественных метрик, отделять эффект модели от изменений состава трафика, находить новые проблемы и удачные сценарии, которые проявляются только в живом потоке.

* Уверенно владеете SQL и Python и умеете самостоятельно проводить исследование от сырых данных до вывода
* Умеете работать с большими объёмами событийных данных и текстовых логов
* Знаете основы математической статистики и A/B-тестирования
* Умеете проектировать метрики, проверять их валидность и объяснять ограничения
* Способны превратить размытый вопрос о качестве продукта в измеримую постановку
* Умеете находить причины за агрегатами и проверять гипотезы на данных
* Понимаете базовые принципы работы ML-моделей и готовы разбираться в сложной LLM-системе
* Ясно формулируете выводы и можете обсуждать их с ML-разработчиками, инженерами, редакторами и менеджерами

* Работали с LLM-продуктами, NLP или голосовыми ассистентами
* Строили evals, LLM-as-a-judge или системы автоматической оценки моделей
* Оценивали качество ранжирования, поиска или классификации
* Собирали обучающие и приёмочные датасеты
* Строили аналитические дашборды и мониторинги
* Знакомы с retrieval, RAG, tool calling и агентными системами
* Умеете работать с неструктурированными данными и проектировать таксономии ошибок

Похожие вакансии Data Science & ML

hh.ru
т-банк

Риск-аналитик в лизинг

т-банкНа сервисе с: 20.08.26 11:24
Зарплата не указанаРоссияМоскваГибрид

Создаем риск-стратегию Лизинга. Ищем аналитика, который будет строить модели на Python, адаптировать их под процессы и влиять на рост бизнеса

Описание

Наша команда отвечает за развитие риск-стратегии Лизинга — большого и стремительно растущего бизнеса.

У нас широкий спектр сценариев одобрения и ранний этап развития бизнеса, поэтому в продукте много пространства для творчества. Задачи в направлении влияют на рост всего бизнеса — в короткий срок вы сможете увидеть результат своей работы.

Обязанности

  • Анализировать массив данных, искать и изучать зависимости и причинно-следственные связи
  • Строить модели на Python
  • Разрабатывать дизайн скоринговых моделей и адаптировать их под бизнес-процессы
  • Составлять технические задания и контролировать процесс внедрения модели
  • Проводить мониторинг и анализировать работу действующих моделей и скорингового процесса, строить ML- и NPV-модели
  • Кросс-функционально общаться с бизнесом, DWH, разработчиками и аналитиками бизнес-правил

Требования

  • Владеете SQL и Python — pandas, sklearn
  • Разбираетесь в математической статистике и классических методах машинного обучения
  • Знаете теорию вероятностей
  • Умеете анализировать бизнес-процессы
  • Знаете, как адаптировать скоринговые модели под стратегию

Мы предлагаем

  • Работу в офисе или удаленно — по договоренности
  • Возможность работы в аккредитованной ИТ-компании
  • ДМС со стоматологией, включая чекапы, компенсацию покупки лекарств и льготные условия страхования для близких. Еще — страховка от несчастных случаев и болезней
  • Рост по карьерному треку: проходите курсы по софт- и хард-скиллам, развивайтесь с поддержкой ментора и повышайте уровень с матрицей компетенций и регулярным ревью
  • Сильное комьюнити. Вы будете работать с экспертами в своей области, сможете делиться знаниями и выступать на конференциях, посещать митапы и писать статьи
  • Онлайн-консультации с психологами, юристами, специалистами по финансам и здоровому образу жизни
  • Компенсацию затрат на спортивные абонементы, приложение Т-Спорта для онлайн-занятий и командные тренировки с коллегами
  • 3 дополнительных дня к отпуску — можно использовать для отдыха или получить компенсацию
  • Специальные тарифы на продукты Т-Банка и широкую программу скидок от партнеров
  • Достойную зарплату — обсудим ее на собеседовании
hh.ru
магнит, розничная сеть. it

Senior ML-разработчик

магнит, розничная сеть. itНа сервисе с: 20.08.26 11:04
Зарплата не указанаРоссияМоскваУдалёнка

Мы ищем ведущего ML-инженера, который возьмёт на себя развитие ML-направления в команде, работающей над продуктами для управления ценами, прогнозирования спроса и формирования коммерческих рекомендаций.

Один из основных проектов — система рекомендаций регулярных цен на уровне SKU × магазин. Система анализирует исторические продажи, цены, промо, остатки, будущие поставки, характеристики товаров и магазинов, а также внешние данные, после чего:

  • прогнозирует спрос при различных ценовых сценариях;
  • оценивает ценовую эластичность
  • рекомендует повышение, снижение или сохранение цены
  • прогнозирует влияние решения на продажи, оборот, маржу и EBITDA
  • рассчитывает уверенность модели и риск падения продаж
  • позволяет сравнивать прогноз с фактическим эффектом после применения рекомендации

В команде уже есть backend и data инженеры, а также ML экспертиза. Новый специалист должен стать техническим лидером именно ML/R&D-направления: определять методологию, формировать исследовательский road map, проводить ревью решений и помогать команде доводить модели до промышленной эксплуатации

Чем ты будешь заниматься
  • Развивать модели прогнозирования спроса и ценовой эластичности
  • Исследовать подходы к causal inference, uplift-моделированию и оценки эффекта изменения цены
  • Проектировать временную валидацию, backtesting и бизнес-метрики качества
  • Работать с uncertainty, confidence, intermittent demand, cold start и long-tailSKU
  • Разрабатывать логику выбора оптимальной цены с учётом бизнес-ограничений
  • Организовать оценку plan/fact и мониторинг качества моделей
  • Участвовать в проектировании feature engineering, batch training и batchinference на больших объёмах данных
  • Проводить design review, code review и менторить ML-специалистов команды
Мы ожидаем
  • Сильную базу в классическом ML, статистике и работе с табличнымиданными
  • Опыт с forecasting, временными рядами и gradient boosting: LightGBM,CatBoost или XGBoost
  • Понимание causal inference и экспериментального дизайна
  • Опыт доведения ML-моделей до production
  • Уверенное владение Python и SQL
  • Понимание временной валидации, data leakage, calibration и uncertaintyestimation.
  • Опыт работы с Airflow или аналогичным оркестратором
  • Понимание принципов распределённой обработки данных, партиционирования и оптимизации вычислений
  • Умение связывать ML-метрики с измеримым бизнес-эффектом
Будет плюсом
  • Опыт в retail, e-commerce, pricing или demand forecasting
  • Практический опыт с PySpark, Trino, Iceberg, S3, dbt или ClickHouse
  • Опыт с price optimization, hierarchical forecasting или operations research
  • Опыт построения ML-мониторинга и проведения A/B-тестов

Текущий стек: Python, LightGBM, Airflow, dbt, Trino, Apache Iceberg, Parquet,S3, PostgreSQL, ClickHouse, Kubernetes и gRPC

hh.ru
вериграм

Senior NLP engineer

вериграмНа сервисе с: 20.08.26 11:12
Зарплата не указанаКазахстанАлматыОфис

Verigram is an international AI company focused on digital identity and fraud prevention. Our solutions are used by banks, fintechs, and online platforms to onboard users remotely and prevent fraud.

And now we are looking for a Senior NLP Engineer who can develop Conversational AI from idea generation to implementation in high-load production. This role is perfect if you love building LLM systems, quality assurance processes and high-load AI services used by thousands of real users. We’re building systems that are capable of independently solving business-related problems: knowledge base search, summarization, extracting insights from requests, proactively providing assistance to operators and AI-powered automation.

We build production-ready AI systems that process large-scale data every day:

  1. Face biometrics and liveness detection
  2. Real-time video analytics
  3. AI assistants and RAG systems
  4. High-load ML services used by thousands of users

What you will do:

  • Design, train, fine-tune, and evaluate machine learning and deep learning models.
  • Develop solutions using LLMs, NLP, computer vision, or other modern AI architectures.
  • Build and improve datasets, including data cleaning, labeling strategies, augmentation, and synthetic data generation.
  • Design experiments and define appropriate evaluation metrics.
  • Improve model accuracy, robustness, latency, and computational efficiency.
  • Research and evaluate new models, architectures, papers, and AI technologies.
  • Work with ML Engineers to productionize models and build reliable inference pipelines.
  • Work closely with business to identify opportunities for AI/ML, define success metrics, and drive product decisions based on data and experimentation.
  • Participate in model monitoring, retraining, and continuous improvement of deployed ML systems.
  • Contribute to technical decisions and ML best practices

Engineering culture:

  • Participate in architecture decisions

  • Code reviews and documentation

  • Contribute to ML engineering best practices

Tech stack:

Python • PyTorch • FastAPI • Transformers• Docker
LangChain • LangGraph • RAG • ClearML • CUDA

Must-have

  • 5+ years of experience in Machine Learning, Data Science, Applied AI, or related fields.
  • Strong knowledge of machine learning, deep learning, probability, statistics, and optimization.
  • Strong Python skills.
  • Strong practical experience with PyTorch or a comparable deep learning framework.
  • Experience training and fine-tuning neural networks.
  • Experience with modern model architectures such as Transformers, LLMs, VLMs, depending on the problem domain.
  • Ability to read research papers and translate relevant ideas into practical implementations.
  • Experience shipping ML models to production
  • Practical experience building AI agents and LLM pipelines using LangChain / LangGraph
  • Understanding of the full ML lifecycle
  • Experience with Git, Linux, Docker, and common ML development workflows.
  • Good communication skills and ability to explain technical decisions clearly.
  • Ability to translate undefined business objectives into technical plans, articulate architectural decisions, and highly self-managed

Nice to have:

  • Experience building high-load services

  • Experience in backend development

  • Experience with GPU inference

  • Experience in developing AI agents and knowledge of LLMOps principles, including CI/CD, orchestration, and prompt version control.

  • Understanding the security of LLM applications.

  • Experience developing and launching BERT, Sentence-BERT, T5 or traditional architectures (fasttext, word2vec)

  • Experience with experiment tracking tools such as MLflow, ClearML, Weights & Biases, or similar.

What we offer:

  • Real production ML & LLM projects

  • Access to GPU infrastructure

  • Strong impact on AI product architecture

  • Competitive salary

  • Strong engineering culture, low bureaucracy

Join us to build real-world AI products!

HireSeeker собирает вакансии со всех площадок и присылает только релевантные. Бесплатно.