Apple представляет 'Keyframer': ИИ-инструмент, который преобразует неподвижные изображения в динамичные анимации с помощью LLM.

Исследователи Apple представили "Keyframer" — инновационный инструмент на основе ИИ, который использует большие языковые модели (LLM) для анимации статических изображений в ответ на текстовые подсказки. Это новаторское приложение, описанное в исследовательской статье на arxiv.org под названием "Keyframer: Empowering Animation Design using Large Language Models", представляет собой значительный шаг в интеграции искусственного интеллекта в творческие процессы, что может повлиять на будущие продукты Apple, такие как iPad Pro и Vision Pro.

Keyframer работает на базе большой языковой модели GPT-4, которая генерирует CSS-код анимации из статических SVG-изображений и текстовых подсказок. Исследование подчеркивает сложности, связанные с использованием LLM для анимации, особенно в том, как пользователи могут эффективно описывать движение на естественном языке.

Представьте, что вы аниматор с определенной идеей. У вас есть статические изображения и сюжет, но перспектива нескольких часов анимации на iPad может быть устрашающей. Здесь на помощь приходит Keyframer: с помощью нескольких лаконичных предложений ваши изображения оживают на экране, словно ваши идеи интерпретируются LLM Apple.

Инструмент позволяет пользователям загружать SVG-изображение, вводить запрос вроде "Заставьте облака медленно двигаться влево" и получать сгенерированный код анимации. Анимации можно дополнительно уточнять, редактируя CSS-код или добавляя новые подсказки. В статье отмечается, что "Keyframer поддерживает исследование и уточнение анимаций через комбинацию подсказок и прямого редактирования сгенерированного результата". Такой подход ориентирован на пользователя и был сформирован на основе интервью с профессиональными аниматорами и инженерами, подчеркивающими важность итеративного дизайна и креативности.

"Я думаю, это было гораздо быстрее, чем многие методы, которые я использовал... Раньше я бы потратил часы на аналогичные задачи", — отметил один из участников.

Keyframer поощряет пользователей принимать итеративный, "декомпозированный" подход к созданию запросов, позволяя им корректировать цели на основе ответов ИИ. "Keyframer позволил пользователям итеративно уточнять свои дизайны через последовательные подсказки, а не рассматривать весь дизайн сразу", — отмечают исследователи. Функции прямого редактирования кода обеспечивают детальный креативный контроль.

Хотя инструменты анимации на основе ИИ могут сделать дизайн более доступным, опасения насчет потери контроля над творчеством остаются. Keyframer стремится сбалансировать доступный прототипирование с независимостью пользователя, комбинируя подсказки с редактированием.

"С помощью этой работы мы надеемся вдохновить будущие инструменты дизайна анимации, которые соединят генеративные возможности LLM с динамическими редакторами, позволяя создателям сохранять контроль над своими разработками", — заключают исследователи.

Keyframer способен революционизировать мир анимации, делая его более доступным для широкой аудитории создателей — предоставляя возможность неэкспертам анимировать истории, которые ранее требовали значительных технических навыков. Это выражает сдвиг в творческом процессе, где ИИ выступает в роли коллаборатора.

Широкие последствия Keyframer могут вызвать культурный сдвиг, делая ИИ более интуитивной частью творческого опыта. Это достижение — не только технологический шаг вперед, но и катализатор для переопределения нашего взаимодействия с цифровой средой. Введение Keyframer от Apple может означать начало новой эпохи, где граница между создателем и творением стирается под влиянием возможностей искусственного интеллекта.