Нейронна мережа створила відеоілюстрацію знаменитої поеми Кольріджа

Для кожного рядка поеми "Кубла Хан" "штучний інтелект" згенерував ілюстрації, які плавно переходять одна в одну.

Для створення зображень автор використав цікаве поєднання двох моделей нейронних мереж: CLIP та VQGAN.

CLIP натренована таким чином, щоб знаходити найкращий текстовий опис для зображення. VQGAN уміє генерувати зображення високої якості. Їхнє поєднання і дозволило генерувати картинку, яка найкраще підходить для ілюстрації кожного рядка поеми. Також автор зробив за допомогою можливостей VQGAN плавні переходи між зображеннями й створив таким чином дуже відповідний відеоряд для поеми, яка була, за легендою, написана Кольріджем після куріння опіуму.

На наш (нефаховий) погляд результат можна вважати високим мистецтвом:

технології ШІ відео

Знак гривні
Знак гривні