Нейросеть создала анимацию по текстовому описанию

Нейросеть CRAFT создает анимации с персонажами «Флинстоунов» по описанию в письменном виде. Приложение «передвигает» персонажей, опираясь на слова, описывающие нужные действия.

 Разработкой занимались американские ученые. Они научили искусственный интеллект на основе датасета из 25 000 более 180 роликов, помеченных вручную. Нейросеть в текстовом описании смогла различать описание фона, треки и суть сцены: что обязуется делать персонаж и его «коллеги».

Нейросеть не способна рисовать анимацию «с чистого лица». Она выбирает подходящие изображения и движения героев из спектра роликов. Программа обладает возможность допускать ошибки, но ученые продолжают исследование особенностей более лучшего развития ИИ. К данному моменту возможности нейросети ограничены по причине надобности вручную размечать и описывать записи.