Senior QA Automation Engineer в команду AI-агенты
2гис · На сервисе с: 29.05.26 12:16
↑ Вакансия с автоподнятиемПривет! Мы — команда AI-агентов, и мы создаём новый способ взаимодействия спривычными продуктами 2ГИС и Отелло. Мы уверены, что в ближайшем будущем общение с AI-ассистентами станет таким же естественным, как использование мобильных приложений сегодня.
Сейчас мы ищем AQA инженера, который поможет нам воплотить это будущее в жизнь.
Чем предстоит заниматься:
- Участвовать в проектах по разработке AI-ассистентов на базе API 2ГИС с текстовыми иголосовыми интерфейсами.
- Организовать и выстроить процесс тестирования AI-агентов.
- Подготавливать тестовые сценарии и данные.
- Проводить различного рода тестирование (ручное, функциональное,E2E, нагрузочное и пр.) AI-агентов на всем цикле разработки.
- Участвовать в формировании стратегического плана развития AI-ассистентов впродуктах 2ГИС, разработке roadmap.
Фреймворки и инструменты тестирования AI:
- Langfuse. Трейсинг и мониторинг AI пайплайнов.
- Интеграционное тестирование. End-to-end сценарии с реальными API.
- Тестирование цепочек рассуждений агента. Проверка контекстной памяти и диалогов.
- Системное тестирование. Performance под нагрузкой (latency, throughput). Стресс-тестирование при высоком количестве запросов. Тестирование деградации при недоступности внешних API.
- Safety Testing. Prompt injection. Тестирование на генерацию вредного контента. Проверка обработки персональных данных.
- Robustness Testing. Adversarial inputs и edge cases. Тестирование на неполных или противоречивых данных.
- Продакшн мониторинг. Настройка алертов на качество ответов агента. Трекинг пользовательской удовлетворенности (ratings, feedback).
Что вам понадобится для успеха:
- Опыт работы в тестировании от 5 лет.
- Опыт написания автотестов на Python.
- Опыт проведения нагрузочного тестирования.
- Опыт формирования процесса тестирования продукта с высокой нагрузкой.
- Знание архитектур AI-агентов (ReAct, Tool Use, RAG, Multi-Agent и пр.).
- Понимание принципов работы LLM (токенизация, промпты и пр.).
- Опыт работы с LangChain/LangGraph или аналогичными фреймворками.
- Понимание недетерминированности AI-систем и методов ее контроля.
Будет плюсом:
- Опыт работы в быстро развивающихся компаниях или стартапах.
- Опыт работы с Jira, Confluence.
- Знание принципов RAG (Retrieval-Augmented Generation).
Почему у нас классно:
- 2ГИС – аккредитованная IT-компания.
- Можно работать удалённо. Если хочешь работать в гибридном формате, есть офисы в Москве, Санкт-Петербурге, два классных офиса в Новосибирске. А также коворкинги в Томске, Саранске, Казани, Екатеринбурге.
- Заботимся о здоровье: ДМС и возможность получать онлайн-консультации и терапевта, невролога, психолога и медицинского агента.
- Если хочешь делиться своим опытом, мы только за — поможем с выступлениями на конференциях и статьями для Хабра/VC.
- У нас есть собственный учебный центр: курсы, тренинги и книги для прокачки скиллов.
Будем рады развивать продукты вместе :)
Статьи для Автоматизация тестирования
Похожие вакансии Автоматизация тестирования
Мы – группа команд разработчиков и аналитиков широкой экспертизы (бизнес/системы/BI), развивающих платформу - конструктор функционала и модулей под необходимые бизнес-функции и продуктовую линейку инструментов управленческой отчетности для всех ключевых направлений Сбера.
Автоматизируем бизнес-процессы через подключение микро модулей и схем платформы.
Мы расширяем команду ввиду масштабирования нашей Платформы и ищем активных разработчиков, способных привнести свои знания и опыт на новые направления с хорошим техническим базисом и собственным взглядом на реализацию продукта.
-
Составлять тестовую документацию: тест-кейсы, тест-планы, чек-листы, протоколы тестирования релизов;
-
Изучать и оценивать требования к ПО на предмет полноты и покрытия функциональности;
-
Функциональное, регрессионное, интеграционное тестирование;
-
Анализ, воспроизведение, локализация дефектов;
-
Участие в создании автотестов;
-
Работа в JIRA/Confluence/Bitbucket.
-
Высшее техническое образование;
-
Опыт тестирования enterprise решений от 3 лет;
-
Знание методик тестирования;
-
Опыт тестирования REST API;
-
Знание JSON и XML(XSD);
-
Умение работать с консолью браузера;
-
Знания JavaScript;
-
Умение писать автотесты на фреймворке Jest с использованием Selenium.
Будет плюсом:
-
Участие в реализации web-проектов с нуля;
-
Знание backend-стека (Node.js, Express, Sequelize, PostgreSQL, ClickHouse).
-
Комфортный современный офис: Кутузовский проспект 32;
-
Офисный формат работы на период испытательного срока, после возможен переход на гибрид;
-
Ежегодный пересмотр зарплаты, системы оплаты формируется из окладной части и годовой премии;
-
Корпоративный спортзал и зоны отдыха;
-
Более 400 образовательных программ СберУниверситета для -профессионального и карьерного развития;
-
Программа адаптации и помощь руководителя на старте;
-
Расширенный ДМС, льготное страхование для семьи и корпоративная -пенсионная программа;
-
Гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ;
-
Подписка Прайм с возможностью совместного использования на трёх близких;
-
Вознаграждение за рекомендацию друзей в команду Сбера.
HireSeeker собирает вакансии со всех площадок и присылает только релевантные. Бесплатно.