Вот появляются все новые и новые модели ИИ и мне интересно понять, а как именно происходит улучшение…

Сегодня подумал про проблемы моделей в ходе их выполнения, работа над задачей, проектом и так далее по списку. Когда ты сам писал код, то так или иначе знаешь этот путь и там не мало бывает работы. Все таки ты это понимаешь ,на сколько модели меньше начали ошибаться, делать больше и быстрее. Ну не знаю кто как ,но когда работашь с этим более 3 лет ,заметно и сравнимо.

Далее стало интерсно … а как же устроен процесс и механика… Ооо об этом писать не буду , но это понимание лучше отражает суть) Едем дальше…

Механика включает в себя не один процесс как для плотных моделей так и для (МоЕ) смесь экспертов, как основное это данные, обучение, контескст, виденье и так далее …

Улучшать можно всё, но сегодня почему то пришла в голову мысль ,что впечатление умной машины ,а может это так и есть… Это умное отслеживание именно контекста и это умная память. Когда машину учат не деградировать в контексте, а наоборот владеть им как жанглер это делает с факелами)))

Продолжая работать , читаю ответы и да! важно читать вывод весь целиком, не бегло!!! В общем стало понятно ,что ии невероятно хорошо держит контекст! в моменте я понял, даже ты можешь упустить детали, он нет.

Наконец то до них стало доперать, как балансировать когда соотношение Мало ресурса и много денег может отрезвлять) Конечно контекст в реал-тайм это важный ключ и я почему-то подумал ,что именно проработка модли по отношению к окну в 1000000 токенов и делает модель лучше, точнее… Да нюанс ,такое впечатление ,что ошибки со стороны ии в рамках тех же проектных задач могут исчезнуть и только человек будет продолжать ошибаться!)))