День 4 из рубрики #вне_ai_дневник
Итак, пришло время проверить тред с задачами в реальной жизни!
Я решила отправить в чат с Джарвисом.... голосовое сообщение! И.... (барабанная дробь)
Джарвис его не понял 😂
Вот и весь цифровой двойник, расходимся...
На самом деле оказалось, что сам аудиофайл Hermes получает, но автоматически перевести его в текст не может. А без текста он, соответственно, не может вытащить задачу, определить дедлайн и отправить всю информацию в Buildin.
Пришлось разбираться.
Джарвис проверил, какие инструменты доступны на компьютере, нашёл сохранённое голосовое и подключил локальное распознавание через Whisper (ура, +1 подключенная модель, так и до Jev дойдем 😮💨).
Но... схема заработала:
🔜 я отправляю голосовое 🔜 Whisper переводит его в текст 🔜 Джарвис анализирует расшифровку 🔜 задача отправляется в Buildin
Кстати, про локальное распознавание: аудиофайл обрабатывается прямо на моём компьютере, а не отправляется в какой-то дополнительный сервис. Плюс к теме безопасности данных.
И вот тут меня настигло ещё одно осознание.
Цифровой двойник — это не одна умная модель, которая магическим образом умеет всё.
А так хотелось...
Скорее, это набор разных инструментов, которые нужно правильно соединить между собой.
🔜 Один принимает сообщение. 🔜 Другой расшифровывает аудио. 🔜 Третий понимает смысл. 🔜 Четвёртый записывает результат в таблицу.
А я смотрю на всё это и периодически спрашиваю: «Ну что, теперь-то работаешь?» 😂
Работает.
Но дальше оказалось, что складывать задачи, работу, карьеру, преподавание и посты в один чат — идея так себе...
Но об этом уже в следующем посте 😄