QA Engineer (AI Solutions)

AI #вакансия #QA Engineer Вакансия: QA Engineer ИИ-решений Компания: Kokoc Tech Грейд: Middle Занятость: Проектная, долгосрочный проект (Фултайм) Формат: Удаленно по РФ Локация: Строго Москва, Саранск Оформление: ГПХ, ИП Вилка: До 1400р в час гросс

Важно: Не смотрим кандидатов с проектами Лимана, Петрович Тех, ВБ, Озон, Лента Тех, Яндекс маркет, М. Видео за последние 6 месяцев.

Проект: Специалист привлекается для поддержки AI-команды (RnD AI Team), которая реализует портфель ИИ-инициатив для бизнес-подразделений компании на внутренней платформе Dify (LLM-агенты, RAG, классификация, извлечение данных из документов, интеграции через API/MCP). Портфель — ~200 инициатив, одновременно в работе 10–15

Задачи: 1. Подготовка тест-кейсов на основании требований и критериев приемки инициатив; 2. Функциональное и интеграционное тестирование ИИ-агентов, workflow на платформе Dify, API-интеграций со внутренними системами; 3. Проверка позитивных, негативных и пограничных сценариев, включая нетипичные запросы пользователей и «галлюцинации» модели; 4. Регрессионное тестирование после изменений промптов, моделей, базы знаний (RAG) и интеграций; 5. Проверка соответствия результата согласованным требованиям и метрикам качества; 6. Формирование и поддержание тестовых выборок (golden set) совместно с бизнесом и ML-командой, участие в оценке качества ответов; 7. Фиксация дефектов, контроль их устранения, отчётность по качеству релизов; 8. Проведение приемочного тестирования перед выпуском в…