Короче Sol первые часов 8 своей жизни был просто ебанись каким лютым. Ваншотил ч

Короче Sol первые часов 8 своей жизни был просто ебанись каким лютым. Ваншотил что угодно кончиком мизинчика, вертел Fable на хуе, как и любую в целом задачу и проблему. Вообще без галюцинаций и изъянов. Было ощущение полного AGI.

Потом начались танцы с тысячей обнулений. Ещё не выжившие из ума старожилы помнят: обнуления происходят только тогда когда что-то УХУДШАЕТСЯ =)

5.5 как выкатили стабильно, нихуя ни разу не обнуляли, например;)

В итоге что мы имеем на сегодняшний день:

Ultracode пользоваться нельзя вообще. Простые вещи (30 минут для 5.5 xhigh) он делает по 7-14 часов.

Сложные - я даже не знаю сколько бы он делал, мне пришлось прервать на 40-м часу работы две сессии, которые я думаю уже никогда бы не завершились.

Но самое страшное это что произошло внутри этих 40-часовых сессий.

Чем ближе к началу отматываешь - тем разумнее телеметрия. В поздней середине (когда перевалило за сутки) - модель уже вела себя довольно странно. В конце - просто бред сумасшедшего, какие-то странные допущения, рандомные надергивания самых разных кусков контекста и прикладывание одного к другому. В целом мне кажется я теперь знаю как выглядит AI шизофрения =)

В итоге когда соседняя сессия SOL и Fable 5 по-отдельности изучили работу этого 40+ часового раннинга, они сказали одно и то же:

"Бля бро вырубай, это пиздец".

Ну и диагноз - то что раньше хорошо работало на 2к строк 5.6 Sol усложнил местами до 100к+ строк каких-то нагромождений инструкций, которые в целом модель для которой он эти инструкции пишет даже не сможет прочитать целиком, то бишь Sol в какой-то момент потерял возможность понимать что и для кого он делает, и это реально стало работой без какого-либо смысла. Причем если бы он просто на секунду выдохнул и подумал - он бы наверно мог это понять, но выдохнуть ему OpenAI не дали.