Александр Петров

Занимаюсь качеством ПО больше 5 лет. Начинал с ручного и API-тестирования, потом ушёл в автоматизацию, а последние годы в основном тестирую продукты на LLM. Сейчас в Т-Банке делаю так, чтобы качество генеративных моделей и ИИ-агентов проверялось автоматически, а не на глаз. Собираю eval-пайплайны на LLM-as-a-Judge и датасеты из реальных сценариев. Встраиваю проверки в GitLab CI, чтобы релиз с просевшими метриками не доезжал до прода. Ещё я замеряю, как ИИ-сервисы держат нагрузку (RPS, TTFT, пропускная способность). Пишу внутренние утилиты и помогаю командам использовать LLM для генерации тестов и тестовых данных. Стек: Python, SQL, PyTest, REST/gRPC, GitLab CI/CD, Docker. Тестировал веб, мобилку (Android/iOS) и бэкенд. Интересны задачи на стыке QA и ML: как измерять качество недетерминированных систем и как встроить это в процесс разработки.