K

QA Engineer ИИ-решений (Python)

Специалист привлекается для поддержки AI-команды (RnD AI Team), реализующей портфель ИИ-инициатив для бизнес-подразделений компании на внутренней платформе Dify.

kokoc_tech · На сервисе с: 02.10.26 21:27

до 1k ₽РоссияМоскваУдалёнка

QA Engineer ИИ-решений в компанию Kokoc Tech

Специалист привлекается для поддержки AI-команды (RnD AI Team), реализующей портфель ИИ-инициатив для бизнес-подразделений компании на внутренней платформе Dify.

📝 Обязанности
1. Подготовка тест-кейсов на основании требований и критериев приемки инициатив;
2. Функциональное и интеграционное тестирование ИИ-агентов, workflow на платформе Dify, API-интеграций со внутренними системами;
3. Проверка позитивных, негативных и пограничных сценариев, включая нетипичные запросы пользователей и «галлюцинации» модели;
4. Регрессионное тестирование после изменений промптов, моделей, базы знаний (RAG) и интеграций;
5. Проверка соответствия результата согласованным требованиям и метрикам качества;
6. Формирование и поддержание тестовых выборок (golden set) совместно с бизнесом и ML-командой, участие в оценке качества ответов;
7. Фиксация дефектов, контроль их устранения, отчётность по качеству релизов;
8. Проведение приемочного тестирования перед выпуском в production и участие в приемке с бизнесом.

🔍 Требования
От 3 лет в тестировании ПО.
От 1 года тестирования продуктов на основе ML/LLM или тестирования API и интеграций backend-сервисов; понимание специфики недетерминированных ответов модели.
Не менее 2 проектов тестирования интеграционных / API-решений или ИИ-продуктов с выводом в промышленную эксплуатацию; опыт построения регрессионных наборов и тестовых выборок.
Желательно: e-commerce, ритейл, B2B-дистрибуция, клиентский сервис.
Тест-дизайн, тестовая документация, работа с баг-трекером;
Тестирование REST API (Postman или аналоги), чтение JSON, логов;
SQL на уровне выборок для проверки данных;
Python на базовом уровне для скриптов проверки и подготовки тестовых данных;
Понимание принципов работы LLM, RAG, промптов и метрик качества ИИ.

💎 Будет преимуществом
Опыт работы с платформами оркестрации LLM (Dify, LangChain и т.п.);
Автоматизация тестирования API (pytest, requests) и LLM-eval инструменты (RAGAS, DeepEval, promptfoo или аналоги);
Опыт разметки и оценки ответов модели (LLM-as-a-judge, ручная оценка по рубрикам);
CI/CD, Git на базовом уровне.

🕹 Условия
Проектная, долгосрочный проект (Фултайм).
Удаленно по РФ.
Локация: строго Москва, Саранск.
Оформление: ГПХ, ИП.
Вилка: до 1400р в час гросс.

📞 Контакты
Telegram: ••••••••

••••••••

Похожие вакансии Ручное тестирование

hh.ru
Зарплата не указанаРоссияСанкт-ПетербургГибрид

Приглашаем Вас принять участие в отечественном проекте по автоматизации горных работ:

  • Это разрабатываемый инженерами и программистами «Полиметалла» программно-аппаратный комплекс, включающий в себя промышленные бортовые компьютеры собственной разработки и производства, серверное решение на базе микросервисной архитектуры и многофункциональный Web-интерфейс.
  • В проекте используются Python, JavaScript, NodeJS, GoLang, C, PostreSQL, Reddis, RabbitMQ, Kubernetes, Grafana, Zabbix, Docker, Gitlab. Разработаны и совершенствуются собственные алгоритмы управления движением карьерной техники, показавшие свою эффективность. Приступаем к разработке собственного решения по позиционированию подземной горной техники.
  • Система развернута уже на четырёх горных карьерах, готовится её внедрение на пятом, а также адаптация решения для подземных рудников. В разработке не стесняемся применять самые современные технологии, перед каждым разработчиком открыто широкое поле деятельности, где многое зависит именно от его способности формулировать и решать задачи, выбирать подходящие инструменты и способы реализации.

Обязанности:

  • Автоматизация тестирования: написание стабильных API- и UI-автотестов, интеграция и обеспечение их регулярного прохождения в CI.
  • Ручное тестирование (Manual QA): проведение исследовательского, функционального и регрессионного тестирования нового функционала симуляционной модели и модулей оптимизации.
  • Тестирование алгоритмов и бизнес-логики: верификация математических моделей транспортной оптимизации движения горной техники и алгоритмов расчета рудопотоков подземных горных работ.
  • Контроль данных: валидация корректности расчета качественных характеристик и объемов перемещаемой горной массы.
  • Развитие фреймворка: поддержка и развитие архитектуры тестового фреймворка (Python), контроль качества кода тестов (линтеры), поддержание автотестов в актуальном состоянии.
  • Тестовая документация и данные: разработка тест-кейсов, чек-листов и матриц покрытия для специфики горнодобывающих задач; подготовка и генерация тестовых данных в СУБД PostgreSQL.
  • Инфраструктура и CI/CD: поддержка работоспособности тестовых стендов, сопровождение пайплайнов в GitLab CI, оперативный разбор упавших или нестабильных (flaky) тестов.
  • Командное взаимодействие: тесное взаимодействие с разработчиками, аналитиками и математиками по тестируемому функционалу систем оптимизации.
Требования:
  • Опыт работы: успешный опыт работы в сфере тестирования ПО (с совмещением ручного тестирования и автоматизации).
  • Языки и инструменты: уверенное владение языком Python и специализированными фреймворками (Pytest, Playwright).
  • Теория тестирования: глубокое знание принципов HTTP API и UI-тестирования, умение проектировать надежные и поддерживаемые автотесты.
  • GitLab CI: практический опыт работы с GitLab CI (конфигурация jobs, stages, include/extends, управление артефактами).
  • Контейнеризация: уверенные знания Docker и Docker Compose для развертывания и поддержки тестового окружения.
  • Окружение и базы данных: уверенное владение ОС Linux, навыки написания Bash-скриптов, знание Git и СУБД PostgreSQL (написание запросов для проверки данных).
  • Будет преимуществом:
    Технологии: опыт работы с gRPC / Protobuf, брокерами сообщений (RabbitMQ) и кешем (Redis).
    Репорты: опыт настройки и генерации Allure-отчетов.
    Код: умение читать и анализировать код на JavaScript.
    Специфика: понимание принципов работы симуляционных моделей или базовые знания в области горного дела / логистики.
Условия:
  • Место работы: Санкт-Петербург, офис м. "Ленинский проспект" (10 минут пешком от метро, 5 минут до заезда на ЗСД);
  • График работы с 9-00 до 18-00 (возможен гибрид);
  • Работа в Управляющей Компании крупного горнодобывающего холдинга;
  • Оформление и социальные гарантии согласно ТК РФ;
  • Ежегодная индексация зарплаты;
  • Расширенный соц. пакет: ДМС с 1го дня работы, ДМС для детей до 10 лет;
  • Возможности для профессионального развития и обучения.
hh.ru
bnovo

Senior Fullstack QA (Python)/Тестировщик

bnovoНа сервисе с: 02.10.26 17:34
Зарплата не указанаРоссияСанкт-ПетербургУдалёнка

Bnovo – аккредитованная IT компания, лидер рынка в области SaaS-решений для гостиничного бизнеса, которая входит в группу компаний Smartway. Нашей платформой пользуются 16 000 партнеров уже более 11 лет для управления объектами размещения и увеличения дохода.

Bnovo – это не только успешная IT компания, это в первую очередь молодая и проактивная команда единомышленников, влюбленная в общее дело! Мы уверены, что именно благодаря сотрудникам компания быстро и успешно развивается, поэтому находимся в постоянном поиске сильных специалистов в своем деле, и сейчас мы ищем Senior Fullstack QA.

Задачи, которыми предстоит заниматься:

  • Построить риск-ориентированную стратегию тестирования: матрицу интеграций и критических сценариев, контрактные и интеграционные тесты, короткий релизный smoke и ручной регресс там, где нужен реальный провайдер;

  • Покрыть платёжный путь: подключение шлюза → ссылка на оплату → статус провайдера → уведомление → отражение оплаты в внутренних сервисах;

  • Обеспечить безопасный переезд платежей: сравнивать результаты старого и нового потоков, проверять поэтапное включение и откат, сверять суммы и статусы, исключать потерянные и двойные платежи;

  • Проверять внутренние цепочки межсервисного взаимодействия;

  • Развивать тестовые данные, заглушки провайдеров, проверки в CI и диагностику дефектов по логам и метрикам;

Что мы ждём:

  • Senior-опыт в тестировании распределённых систем и внешних API; способность самостоятельно определить приоритеты, критерии выпуска и объём регресса;

  • Сильное ручное тестирование и разработка поддерживаемых API/интеграционных автотестов. Практический Python/pytest особенно полезен для существующего набора тестов;

  • Опыт проверки асинхронных процессов: webhook, очереди, повторные попытки, идемпотентность, порядок событий и восстановление после отказа;

  • Работа с Docker, GitLab CI, тестовыми БД, логами и метриками; умение локализовать сбой между сервисами и провайдером;

  • Опыт с эквайрингом, возвратами, двухстадийными платежами и сверкой финансовых данных — сильное преимущество.

Что тебя ждёт в Bnovo:

  • Возможность реализовать смелые профессиональные идеи в сфере TravelTech;
  • Команда единомышленников, которая любит продукт и увлечена своим делом;
  • Условия, в которых каждый сотрудник может расти и развиваться профессионально, а также скидки на популярные образовательные платформы;
  • Оформление в соответствии с ТК РФ;
  • Удаленный формат работы;
  • Комфортный офис в центре Санкт-Петербурга с зонами отдыха и уютной кухней;
  • Забота о сотрудниках - ДМС с психологом и телемедициной;
  • Программа привилегий и скидок от BestBenefits;
  • Книжный клуб для сотрудников и офлайн библиотека в офисе;
  • Выходной в День рождения;
  • Не только работа, но и крутые корпоративы, настольные игры и другие активности :)

Хочешь стать частью нашей команды? Отправь нам свой отклик и мы обязательно его рассмотрим! Мы всегда рады видеть в своей команде опытных профессионалов и талантливых специалистов, готовых учиться и развиваться вместе с нами.

Присоединяйся к нам и развивай свою карьеру в одной из самых перспективных IT-компаний в сфере TravelTech!

Соц.сети
Н

Senior QA Mobile

Неизвестный работодательНа сервисе с: 02.10.26 21:07
Зарплата не указанаРоссияУдалёнка

Senior QA Mobile

Местоположение: РФ
Формат работы: Удаленно
Опубликована: ••••••••

Требования:
• Опыт тестирования iOS и Android от 4 лет
• Работа с Android Studio, XCode, эмуляторами/симуляторами, чтение логов, shell, adb
• Работа с Charles/Fiddler/Proxyman, опыт работы с breakpoints (подмена ответов)
• Понимание работы с GitLab, TestFlight

Важно:
⚠️ Удаленно из РФ

Контакт: ••••••••, ••••••••

•••••••• опубликована в ••••••••

HireSeeker собирает вакансии со всех площадок и присылает только релевантные. Бесплатно.