Кино под угрозой. OpenAI показала ИИ Sora, создающий почти реалистичные видео

Компания по разработке искусственного интеллекта OpenAI 15 февраля анонсировала Sora, новую модель, генерирующую видео высокой четкости продолжительностью до одной минуты из текстовых подсказок.
Sora, что в переводе с японского означает "небо", в ближайшее время не станет доступной для широкой публики. OpenAI делает ее доступной для небольшой группы ученых и исследователей, которые оценят вред и потенциал его неправильного использования.
"Sora способна генерировать сложные сцены с несколькими персонажами, определенными типами движения и точными деталями объекта и фона, – сообщает компания на своем сайте. – Модель понимает не только то, что спросил пользователь, но и то, как эти вещи существуют в физическом. мире".
Introducing Sora, our text-to-video model.
— OpenAI (@OpenAI) February 15, 2024
Sora can create videos of up to 60 seconds featuring highly detailed scenes, complex camera motion, and multiple characters with vibrant emotions. https://t.co/7j2JN27M3W
Prompt: "Beautiful, snowy… pic.twitter.com/ruTEWn87vf
На одном из видео, сгенерированных Sora, опубликованном OpenAI, изображена пара, которая гуляет по заснеженному городу Токио, а лепестки вишневого цвета и снежинки кружат вокруг них. Другой показывает реалистичных шерстистых мамонтов, гуляющих по лужайке на фоне заснеженных горных хребтов.
Prompt: "A stylish woman walks down a Tokyo street filled with warm glowing neon and animated city signage. she wears a black leather jacket, a long red dress, and black boots, and carries a black purse. she wears sunglasses and red lipstick. she walks confidently and casually.… pic.twitter.com/cjIdgYFaWq
— OpenAI (@OpenAI) February 15, 2024
OpenAI говорит, что модель работает на основе глубокого понимания языка, что позволяет точно интерпретировать текстовые запросы. Однако, как и все генераторы изображений и видео искусственного интеллекта, Sora неидеальна и имеет артефакты. OpenAI также предупреждает, что модели может быть трудно понять причинно-следственные связи – например, она может создать видео человека, который ест печенье, но на печенье может не быть следов укусов.
Prompt: "A movie trailer featuring the adventures of the 30 year old space man wearing a red wool knitted motorcycle helmet, blue sky, salt desert, cinematic style, shot on 35mm film, vivid colors." pic.twitter.com/0JzpwPUGPB
— OpenAI (@OpenAI) February 15, 2024