По результатам опроса, который провели ученые, 68% респондентов считают качество получаемых мультфильмов «приемлемым».
Данная идея уже была реализована немного раньше: в 2018 году ученые с помощью алгоритма на основе нейросетей создали видеоролик из 32 кадров. Они использовали лишь описания по типу «игра на траве в гольф», пишет издание Venture Beat.
Однако Disney вывели идею на новый уровень. Их алгоритм может воспринимать сложные предложения и ему не требуются описания для создания роликов.
Это достигается за счет использования модульной нейросети, которая состоит из нескольких подсетей. Каждая нейросеть в модуле отвечает за определенную функцию. Например, одна упрощает предложения, другая выделяет текст для сценария. Алгоритм подбирает подходящую 3D-модель из библиотеки и добавляет в мультик. Используется графический движок Unreal.
Алгоритм не заменяет человеческий труд, однако значительно упрощает его.
Напоминаем, что ранее Gazeta.SPb сообщала о том, что игра Assassin’s Creed может помочь восстановить Собор Парижской Богоматери.