Узнайте о первом музыкальном клипе, созданном с использованием неолreleased модели Sora от OpenAI.

OpenAI привлекла внимание технологического сообщества, а также профессионалов в области медиа и искусства своим новым ИИ-моделью Sora. Эта инновационная технология создает реалистичные высококачественные видео длительностью до 60 секунд, хотя пока не доступна для широкой аудитории. В феврале 2024 года OpenAI объявила, что Sora доступна для тестирования ограниченной группе "red teamers" и небольшому числу визуальных артистов, дизайнеров и кинооператоров. Тем не менее, ранние пользователи начали создавать и делиться проектами с использованием Sora.

Одним из таких первопроходцев стал сценарист и режиссер Пол Трилло, который первым продемонстрировал сторонние видео, созданные с помощью Sora. Он создал "первое официальное музыкальное видео, сделанное с помощью Sora от OpenAI" для инди-артиста chillwave Washed Out (Эрнест Уэзерли Грин-младший) и его сингла “The Hardest Part.” Четырехминутное видео состоит из быстро сменяющихся, взаимосвязанных кадров, плавно соединенных для создания эффекта непрерывного зума.

На платформе X Трилло рассказал, что изначальная идея видео пришла ему в голову десять лет назад, но он отложил её. Он поделился, что финальное видео было создано из 55 клипов, сгенерированных Sora, из общего числа 700, которые затем были смонтированы в Adobe Premiere.

ВRelated news, Adobe анонсировала интеграцию Sora и других моделей генерации видео на базе ИИ в свое программное обеспечение Premiere Pro. Однако сроки реализации пока не подтверждены. Тем, кто хочет повторить процесс Трилло, следует использовать другие инструменты, такие как Runway или Pika, так как Sora еще недоступна для широкой публики.

В интервью Los Angeles Times Washed Out выразил энтузиазм по поводу использования новых технологий в своем творчестве, отметив желание исследовать передовые методики. В интервью подробно описаны конкретные запросы, использованные для генерации видео: Грин подчеркнул важность точного указания деталей изображений, углов съемки и движений персонажей. Например, Трилло описал одну сцену: “Мы зумируем через пузырь, он лопается, и мы зумируем через жевательную резинку на открытое футбольное поле,” что подчеркивает динамичную и погружающую природу видео.

Трилло также отметил, что полностью использовал возможности Sora для текстового видеопроизводства, не включив сгенерированные где-либо еще статические изображения, что является распространенным подходом среди художников в эволюционном ландшафте ИИ-видео.

Появление Sora демонстрирует потенциал ИИ в создании медиа, опровергая сообщения о том, что предыдущие демонстрационные видео, такие как “Air Head” канадской студии Shy Kids, в значительной степени полагались на VFX и традиционные инструменты редактирования, такие как ротоскопирование в Adobe After Effects. Кроме того, это подчеркивает продолжающийся интерес среди креативщиков к использованию ИИ- инструментов для повествования, несмотря на критику со стороны тех, кто считает такие технологии, особенно от OpenAI, эксплуатационными. Возникают опасения по поводу использования ранее созданных работ художников в качестве обучающих данных без согласия или компенсации.