Аналитик-разработчик Alice AI LLM

Наша команда занимается аналитикой базовой технологии, лежащей под капотом Алисы, Нейропоиска, Нейробраузера и многих других продуктов, — большой языковой модели Alice AI. Вот некоторые из наших рабочих вопросов:
* Как определить, с какими задачами модель справляется хорошо, а с какими — не очень?
* Какие данные добавить в finetune, чтобы обучить модель новой задаче?
* Откуда взять эти данные и как проконтролировать их качество?
* Как построить процесс краудсорсинговой разметки?

Давайте искать на них ответы вместе!

Развитие модели

В эту задачу входят проактивный поиск ошибок модели и исправление проблемных срезов, оценка эффективности изменений и последующее внедрение улучшений.

Формирование базы данных

Вы будете собирать данные для разработки и интеграции новых функций.

Обучение исполнителей

Вам предстоит подбирать и обучать квалифицированных исполнителей, разрабатывать для них систему мотивации, контролировать качество разметки и внедрять процессы для улучшения результатов.

Больше об аналитике в Яндексе — в канале Yandex for Analytics

* Любите работать с текстовыми данными
* Знаете математическую статистику и теорию вероятностей
* Умеете писать на Python и SQL
* Самостоятельны и готовы браться за новые задачи, для которых нет готового решения

* Работали с Толокой или другими краудсорс-платформами