📝 Кейс: Подготовка к защите проекта с использованием ИИ Проблема: Вы новый сотрудник, которому предстоит защищать проект перед инвесторами. Несмотря на хорошую подготовку, есть опасения, что не удастся уверенно ответить на вопросы.

Задача: С помощью ИИ-инструментов отработать возможные вопросы.

Промпт: Представьте, что я — исполнитель, а вы — заказчик, интересующийся ходом проекта по созданию ИИ-хаба в Хабаровском крае. Задавайте вопросы, пока я не скажу "Стоп". Минимум 20 вопросов. Оцените мои ответы по шкале от 1 до 5.

На этот раз мы решили отойти от стандартного тестирования моделей, которые на слуху, и использовали LMSYS Chatbot Arena. Эта платформа позволяет решить задачи с использованием случайных моделей и выбрать наиболее подходящую.

➡️ Раунд 1: Llama-3.1 и  GPT-4 Llama-3.1: четко поняла задание, задавала вопросы последовательно, требуя развернутых ответов. Совершенного не удовлетворилась односложным ответом и начала допытывать дальше.

GPT-4: задала все вопросы сразу, завершив диалог после простого ответа "Проект двигается очень хорошо".

➡️ Раунд 2: Sus-column-r и Claude-3 Claude-3: явный победитель, точно следовал инструкции.

Sus-column-r: не поняла суть задания.

✔️ Для справки: Llama-3.1: модель с открытым исходным кодом от Meta*. GPT-4: флагманская модель от OpenAI. Claude-3: модель от Anthropic, известная своими диалоговыми способностями. Sus-column-r: новая модель в LMSYS Chatbot Arena, впечатляющая своими успехами в логических и математических задачах. Ходят слухи, что это может быть ранняя версия GPT-5.

Вывод: Для репетиции защиты проекта лучше использовать проверенные модели.

*Экстремистская организация, деятельность которой запрещена на территории РФ. ——— #Кейсы

✍️Подписывайтесь: @aiforproduct