День 4 из рубрики #вне_ai_дневник

Итак, пришло время проверить тред с задачами в реальной жизни!

Я решила отправить в чат с Джарвисом.... голосовое сообщение! И.... (барабанная дробь)

Джарвис его не понял 😂

Вот и весь цифровой двойник, расходимся...

На самом деле оказалось, что сам аудиофайл Hermes получает, но автоматически перевести его в текст не может. А без текста он, соответственно, не может вытащить задачу, определить дедлайн и отправить всю информацию в Buildin.

Пришлось разбираться.

Джарвис проверил, какие инструменты доступны на компьютере, нашёл сохранённое голосовое и подключил локальное распознавание через Whisper (ура, +1 подключенная модель, так и до Jev дойдем 😮‍💨).

Но... схема заработала:

🔜 я отправляю голосовое 🔜 Whisper переводит его в текст 🔜 Джарвис анализирует расшифровку 🔜 задача отправляется в Buildin

Кстати, про локальное распознавание: аудиофайл обрабатывается прямо на моём компьютере, а не отправляется в какой-то дополнительный сервис. Плюс к теме безопасности данных.

И вот тут меня настигло ещё одно осознание.

Цифровой двойник — это не одна умная модель, которая магическим образом умеет всё.

А так хотелось...

Скорее, это набор разных инструментов, которые нужно правильно соединить между собой.

🔜 Один принимает сообщение. 🔜 Другой расшифровывает аудио. 🔜 Третий понимает смысл. 🔜 Четвёртый записывает результат в таблицу.

А я смотрю на всё это и периодически спрашиваю: «Ну что, теперь-то работаешь?» 😂

Работает.

Но дальше оказалось, что складывать задачи, работу, карьеру, преподавание и посты в один чат — идея так себе...

Но об этом уже в следующем посте 😄