Не ждите крупных обновлений искусственного интеллекта от OpenAI и Google
Через несколько мгновений после того, как OpenAI, Google или Anthropic выпустят серьезное обновление своих моделей искусственного интеллекта, вы увидите, что люди уже размышляют о дате и функциях следующего обновления, и эти слухи подкрепляются довольно регулярными обновлениями. Согласно отчету Bloomberg, все три основных разработчика искусственного интеллекта, как сообщается, изо всех сил пытаются заставить свои модели следующего поколения соответствовать их амбициям по улучшению по сравнению с текущим поколением.
В отчете утверждается, что работа OpenAI над моделью Orion идет не так хорошо, как ожидала компания. Модель не работает на том уровне, к которому стремится компания, особенно когда дело касается кодирования от GPT-4 по сравнению с тем, как GPT-4 вытеснил GPT-3.5. Это может быть одной из причин, по которой генеральный директор OpenAI Сэм Альтман публично опроверг слухи о дате выпуска модели Orion и обновлении до ChatGPT.
По данным Bloomberg, задержки и заниженные ожидания также беспокоят Google и Anthropic. Разработка Google Gemini идет медленнее, чем ожидалось, по данным Bloomberg, Anthropic уже отложила выпуск своей модели Claude 3.5 Opus по тем же причинам, несмотря на то, что дразнила ее в начале этого года.
Все разработчики ИИ сталкиваются с одинаковыми потолками в расширении огромных возможностей своих моделей. Самым большим из них, вероятно, являются обучающие данные. Компании используют наборы данных для обучения своих моделей ИИ, но даже Интернет не безграничен, и это даже не предел больше при обсуждении высококачественных данных, полезных для обучения ИИ. Найти ранее неиспользованную и доступную информацию становится все сложнее. Отчасти это связано с растущей осведомленностью и учетом этических и юридических прав на использование некоторых данных, но в некоторых случаях это только часть объяснения блин, человеческих примеров не хватает чтобы модели ИИ могли усваивать и улучшать. Даже если компании найдут достаточно необработанных данных, их обработка и включение в модель ИИ обходятся дорого с точки зрения денег и вычислительной мощности тогда обновление модели ИИ может не стоить своих денег.
Топливо или испарения?
В отчете описывается, как OpenAI и ее конкуренты ищут другие способы обновления своих моделей, такие как постобучение Orion с обратной связью от человека. Это медленный способ улучшить модель ИИ и поднимает вопросы о том, достиг ли ИИ пределов быстрого масштабирования. Размер и функции. Грубой вычислительной мощности и лавин данных может оказаться недостаточно, чтобы воплотить в жизнь мечты разработчиков ИИ. Им придется проявить больше творчества в том, как они работают над своими моделями, не задействуя при этом весь Интернет.
Нам следует ожидать несколько более медленных выпусков новых и улучшенных функций ИИ. Это может быть не так уж и плохо, если это даст каждому возможность перевести дух и по-настоящему изучить лучшие способы использования всех инструментов ИИ, выпущенных за последнее время несколько лет. С ChatGPT-o1 есть что исследовать. И, кто знает, возможно, это даст OpenAI возможность поработать над выпуском программы для создания видео Sora AI, которая остается строго ограниченной, несмотря на то, что OpenAI постоянно дразнит ее демо-версиями.