Top.Mail.Ru

VLM против регресса: опыт создания AI-агента, тестирующего интерфейсы как человек

ИИ в разработке ПО
Тестирование и автотесты

Тезисы

Автоматизация UI-тестирования в мобильных приложениях остаётся одной из самых дорогих и сложных областей разработки: e2e-тесты медленно пишутся и поддерживаются, ручной регресс плохо масштабируется, визуальные и контекстные дефекты всё равно ускользают.

В докладе расскажу про создание AI QA-агента, который выполняет тест-кейсы так же, как человек: запускает приложение, проходит сценарии, анализирует экраны с помощью VLM-модели и автоматически сравнивает ожидаемый и фактический результаты.

Отдельно остановимся на экономике и сценарии внедрения: где агент уже может заменить ручной регресс, а где человек ещё долго будет незаменим.


Аудитория

Для всех


Уровень сложности

Средний

Т-Банк
Владимир Бойко

Старший iOS-разработчик в AI Center Т-Банк, участвовал в разработке «Умной камеры» в мобильном приложении, более восьми лет занимается iOS-разработкой. Сфера интересов — агентные системы и применение VLM/LLM-моделей в продуктовых задачах.

Другие спикеры трека ИИ в разработке ПО