Apple представила многомодальную LLM с открытым исходным кодом: основные моменты октября

В октябре 2023 года исследователи из Apple и Колумбийского университета тихо выпустили открытый многомодальный большой языковая модель (LLM) под названием Ferret. В этот релиз вошли как код модели, так и её веса, однако он был предназначен исключительно для научных целей и не для коммерческого использования. Изначально на него не обратили внимание, но ситуация изменилась после недавних достижений в области открытых моделей, таких как новшества от Mistral и дебют модели Gemini от Google на Pixel Pro, которые разгорели дискуссии о потенциале локальных LLM для малых устройств.

Обсуждения усилились после объявления Apple о значительном прорыве в развертывании LLM на iPhone. Компания опубликовала две новые научные статьи, описывающие методы создания 3D-аватаров и повышения эффективности вывода ИИ. Эти достижения обещают предоставить более захватывающие визуальные впечатления и pave the way for complex AI systems operating on consumer devices like the iPhone and iPad.

Многие представители ИИ-сообщества теперь осознают важность выхода Apple на рынок открытых LLM. Барт де Витте, руководитель европейской некоммерческой организации, посвященной открытым ИИ в медицине, отметил в X: «Я как-то упустил это. Apple присоединилась к сообществу открытого ИИ в октябре. Выпуск Ferret демонстрирует приверженность Apple к значимым исследованиям в области ИИ и утверждает её позиции как лидера в многомодальном ИИ… Я с нетерпением жду того дня, когда локальные LLM будут работать на моем iPhone как часть переработанной iOS».

Тристан Бееренс, немецкий ИИ-музыкальный артист и консультант, также подчеркнул это событие на LinkedIn, написав: «Что ж, Рождество завтра. Но вы знали, что Apple (да, Apple!) недавно выпустила многомодальный LLM, включая код и веса?»

Технологический блогер Бен Диксон добавил: «Какое развитие ИИ в 2023 году вы ожидали меньше всего? Для меня это было открытие Apple LLM (хотя с некорпоративной лицензией)». Он отметил историческую позицию Apple по закрытым системам и акцентировал внимание на стратегическом шаге компании в LLM-рынке, соответствующем тренду открытого кода.

Этот шаг соответствует текущему ландшафту, где такие компании, как Anthropic и OpenAI, reportedly ищут значительное новое финансирование для укрепления своих усилий по созданию защищенных LLM. Согласно Reuters, Anthropic ведет переговоры о привлечении 750 миллионов долларов от Menlo Ventures, в то время как Bloomberg сообщает, что OpenAI изучает новые раунды финансирования с потенциальной оценкой свыше 100 миллиардов долларов.