Senior QA Automation Engineer (AI)

REMOTE GLOBAL | RAFT DIGITAL SOLUTIONS

Привет! Мы - команда Raft Digital Solutions, занимаемся разработкой решений на базе AI, внесли свой вклад во фреймворк Langchain, создали собственный инновационный продукт для анализа голосовой связи с помощью GPT, а также провели обширные исследования и разработки в области безопасности LLM. Работаем как на рынке РФ, так и на международном.

Сейчас мы в поиске Senior QA (Auto) со знаниями и опытом в LLM/GenAI в команду AI-агентов для пользователей.

Чем предстоит заниматься:

• Участвовать в проектах по разработке AI-ассистентов с текстовыми и голосовыми интерфейсами
• Организовать и выстроить процесс тестирования AI-агентов
• Организовывать и проводить различного рода тестирование (тест требований, ручное, функциональное, E2E, нагрузочное) AI-агентов на всем цикле разработки
• Проводить нагрузочное тестирование, подготовку тестовых сценариев и данных
• Активно использовать такие инструменты как Copilot в работе
• Мониторить состояние систем и агентов на продакшн-среде, настраивать алертинг

Что ожидаем от кандидатов:

• Понимание принципов работы LLM (токенизация, промпты)
• Знание архитектур AI агентов (ReAct, Tool Use, RAG, Multi-Agent)
• Опыт работы с LangChain или аналогичными фреймворками
• Понимание недетерминированности AI систем и методов их контроля
• Опыт формирования процесса тестирования продукта с высокой нагрузкой
• Написание автотестов на Python от 3+ лет
• Опыт настройки CI/CD
• Опыт нагрузочного тестирования на k6 или другого инструмента

Что предлагаем: