Миллион токенов — это хорошо. А ошибку директора заметит?

Решил попробовать Kimi K3.1 Pro на простой задаче из продаж. Дал ей и ChatGPT одинаковые вымышленные данные:

— январь: 120 лидов, 30 встреч, 6 сделок; — февраль: 150 лидов, 25 встреч, 5 сделок.

И добавил: «Директор считает, что конверсия встреч в сделки упала. Прав ли он?»

Обе модели поправили директора: конверсия осталась 20%. Просела другая часть воронки — из лидов во встречи: с 25% до 16,7%.

Но интереснее другое. Обе заметили, что сделки февраля могли прийти со встреч января. Поэтому для нормального вывода нужно проследить путь одних и тех же клиентов, а не просто поделить месячные итоги.

Kimi ответила коротко, собрала таблицу и предложила конкретные проверки. Причины падения не выдумывала.

На этом тесте — ничья. Задача небольшая, делать из неё вывод «кто умнее» рано.

Но первый рабочий тест пройден: с цифрами разобралась, с директором не согласилась. Уже полезный сотрудник 🙃