Когда ИИ обсуждают говорят "вот они не могут, и тут бах могут и это не предсказуемо", так эти штуки находят скрытые закономерности, дорастают до порога сложности и бах могут. Только это не сильный ИИ. Сильный ИИ может дообучаться и менять свои найденные закономерности. Так что пока что чатгопота это очень крутая книга с внутренними ссылками, которые работают автоматически. Не более.
@3draven со стороны кажется что человек долго не мог понять как работают его мозг и наткнулся на это случайно. Альтман нам писал статью которую я не читал что они знают как сделать сильный ии
мне опять таки со стороны кажется что это очень просто :-)
нужно научить llm экспериментировать. рандомно менять решения и проверять результаты. с помощью физических экспериментов в реальном мире. и все, приплыли.
@GalacticJew на данный момент ИИ это просто умножение огромного числа матриц. Результаты умножения хранятся в виде не изменяемой кучи данных. Так что в текущем виде не будет ИИ экспериментировать, ему результаты класть некуда кроме как в предподготовленный контекст.
@GalacticJew если проще, то у тебя в голове веса меняются, а у этой штуки нет, дообучить модель такого размера очень дорого так что бы "на каждый чих" как у сильного ИИ должно быть.
