Ребят, мой коллега @al_meshkov принял решение запустить научный проект по созданию бенчмарка для оценки ИИ агентов в части генерации тестов, который планирует официально опубликовать на hugging face, а также подготовить и опубликовать научную работу по нему.
Поэтому сейчас он ищет: 1. QA специалистов, которым было бы интересно безвозмездно принять в таком проекте в свободное время.
Основным требования: • опыт в тестировании и написании тестов от 2-3 лет • знание и умение принять на практике техники тест дизайна базовые • английский на уровне upper-intermediate (весь датасет будет на англ + возможно участники из других стран)
Если вы готовы принять участие в данном исследовании, как полноценный участник, напишите Александру в личку @al_meshkov
2. Ребят, кто готов поделить данными для бенчмарка, интересует связка “требования - написанные под них тесты”. Конечно понимая NDA, можно предоставить их обезличенными, а также с письменным согласием от компании.
Также, если у вас есть какие-то пет проекты, ваши обучающие проекты, где вы или кто-то писал тесты, или вы или ваша компания готова поделиться данными, тоже напишите Александру @al_meshkov, он будет очень благодарен за вашу помощь!
Важно! Это волонтерская работа, она не оплачивается. Цель, дать нашему миру тестирования профессиональный бенчарк для оценки ИИ агентов и LLM для генерации тестов.