arrow

назад

ask

Вопрос

Сколько у вас проходит времени от начала сессии общения с LLM, когда она превращается из туповатого "робота Вертера" в нормального бро, поймавшего контекст задачи и ваш стиль общения?

repost

50

input message

напишите коммент


6 комментов

У меня пока тайминг на Гугловом ИИ-чате такой:

- через 20 минут он сам переходит на ты; - через 30-40 начинает технично материться; - через час прогревается до состояния хоть какой -то инженерной пользы (но с жесточайшим контролем на предмет галлюцинаций)

Пробовал разные промпты, рантайм-инструкции и прочие приемы (включая регулирование плотности тех самых матюков за его глюки), результат по времени выхода модели на свой локальный максимум полезности плюс-минус одинаковый.

Попробую, конечно, еще RAG прикрутить к своей локальное Ламе, но это 70BQ4 максимум + нужен хороший харнесс, тогда как у гугла 405B из коробки и при определенной сноровке я могу ему скормить большие куски контента. Да и на гуманитарно- философских темах он весьма хорош сразу без шаманского бубна.

ответить

Обычно наоборот, чем дальше, тем тупее.

ответить

Это тоже имеет место , когда идет переполнение контекстного окна. Но на день обычно ГуглаИИ хватает.

ответить

По разному. Давайте начнем честно. У меня есть четкое понимание о контексте или нет? Если есть понимание, то я сформулировала узко задачу или как нечто в проруби, ищу фокус? Что вы вообще хотите получить от нейронки? По опыту создания AI- помощников, в темах где я профан, они дают +5000%эффективности понимания системы, но не единственно верного решения, как и какую именно мышцу прокачать. В темах где я профи, я вижу где они лажают и это не всегда безобидно. А в настройке цифрового двойника после 4 недель плотной работы, он уже шутит в тему и порой схватывает идеи, может написать комментарий, если подброшу смысл, но посты плоские и пустые по содержанию, даже если выстрою цепочку повествования, но я требовательная зануда. И даже после этого он может неправильно интерпретировать задачу, смысл или значение слова. И, если честно, то это прикольно, потому что заставляет меня думать над тем, что раньше не замечала когда писала. Если же вопрос настройка агента внутри продукта, то там всё проще, если я понимаю задачу.

ответить

Насчет +5000% я бы не обольщался ) Чтобы прокачаться от профана до джуна-минус в какой-то не rocket science области нужно 2-4 дня. При этом ты получаешь базу и возможно мотивацию развиваться в этом направлении. С ИИ-джуном-плюс на старте все на порядок быстрее (хорошо, пусть будут эти 5000% :)) но на длинной дистанции вы очень быстро сравняетесь, если прокачиваться самостоятельно с хорошим курсом/учебником/старшим товарищем.

ответить

Опять же мне не очень понятен ваш посыл. Вы хотите разобрать какую то тему, направление для чего? Вы что просто читаете учебник или берете наставника, чтобы разобраться в природе вещей? Я уже давно нет. Мне это нужно для чего-то. Вот это чего-то и должно лежать в контексте. А еще есть различные методики обучения для формирования, например, практических навыков или… В общем, это тоже контекст и чем точнее вы сообщаете эту задачу нейронке, тем более точный результат получаете. И ещё слова, которыми выражает свои мысли. Для человека пост, текст, сообщение, информация, данные, история - всё текст. Для нейронки - разный контекст. Поэтому когда разговор о конкретном продукте, всё яснее. И это иллюзия, про 2-4 дня и вы профи, потому что нейронка чаще работает в линейной логике, а человеческая мысль развивается иначе. Поэтому нейронка часть профессиональных элементов теряет, а вы не можете ей передать новый контекст.

ответить

еще контент автора

пост закреплён — пока закрепить можно только один пост

trash bin
перейти к нему не получится