Исследователи из Nvidia и Стэнфордского университета разработали модель генерации видео, которая по одному запросу создает минутные ролики с полноценным сюжетом — код опубликовали на GitHub. Для демонстрации технологии нейросеть обучили на 50 часах оригинального мультсериала и сгенерировали новые эпизоды «Тома и Джерри» по многостраничным описаниям.
Из-за нехватки ресурсов мы экспериментировали только с одноминутными видео, но этот подход можно расширить до более длинных видео и более сложных историй, — говорится в сообщении.
На данный момент модель Test-Time Training (TTT) может собирать сцены с простейшей логикой развития, однако имеет визуальные и логические ошибки. Для тестов использовалась модель на 5 млрд параметров. При увеличении вычислительных мощностей планируется улучшить длину и связность роликов.
Ранее ИИ Google за 48 часов открыл ключевой механизм передачи устойчивости к антибиотикам у супербактерий. Исследователи Имперского колледжа Лондона десятилетиями пытались выяснить, как супербактерии заимствуют фрагменты ДНК у вирусов для внедрения в другие клетки. Они провели анализ и подтвердили гипотезу о «хвостах» ДНК. Перед публикацией ученые проверили ИИ на выполнение той же задачи и выяснили, что ему хватило двух суток, чтобы прийти к тем же выводам.
