Генератор роликов Runway Gen-3 сравнили с OpenAI Sora и опробовали на гномах

Некоторые примеры выглядят лучше, некоторые — хуже.

Кстати, на сайте читать удобнее

Основанный создателями Stable Diffusion стартап Runway начал давать тестерам доступ к генератору роликов Gen-3. Один из тестеров уже сравнил результаты работы Gen-3 с генератором Sora от OpenAI.

В рамках теста Gen-3 предлагали тот же промпт, что и Sora. В некоторых случаях нейросеть от Runway справилась лучше, кое-где преимущество осталось за Sora: например, джип у Gen-3 едет так, что пыль его опережает.

Как и Sora, Gen-3 пытается строить цельную модель мира. В теории такой подход позволяет генераторам создавать более реалистичные ролики, в которых правдоподобно выглядит не только картинка, но и взаимодействие объектов друг с другом.

На практике все не так просто, но некоторые ролики у Gen-3 и в самом деле выглядят хорошо. Например, взгляните на сцену с гномом, вылезающим из дупла, и сцену с нательной камерой — а заодно посмотрите на летающего козла.

В Runway не говорят, когда доступ к генератору Gen-3 получат все желающие. Видимо, это произойдет раньше, чем OpenAI откроет доступ к Sora.