Нейронна мережа створила відеоілюстрацію знаменитої поеми Кольріджа
Для кожного рядка поеми "Кубла Хан" "штучний інтелект" згенерував ілюстрації, які плавно переходять одна в одну.
Для створення зображень автор використав цікаве поєднання двох моделей нейронних мереж: CLIP та VQGAN.
CLIP натренована таким чином, щоб знаходити найкращий текстовий опис для зображення. VQGAN уміє генерувати зображення високої якості. Їхнє поєднання і дозволило генерувати картинку, яка найкраще підходить для ілюстрації кожного рядка поеми. Також автор зробив за допомогою можливостей VQGAN плавні переходи між зображеннями й створив таким чином дуже відповідний відеоряд для поеми, яка була, за легендою, написана Кольріджем після куріння опіуму.
На наш (нефаховий) погляд результат можна вважати високим мистецтвом:
