阿姆斯特丹大學的研究人員創建了一個AI模型，可以由繪畫來生成旋律。他們的研究似乎是在驗證叔本華的想象。叔本華說，世界是意志的表象，是音樂的夢幻。按照他的說法，每一幅繪畫背後都是音樂。
這一AI模型名為“綜合變奏自動編碼器”（SynVAE），由兩個神經網絡構成，一個將圖像轉換為矢量，併為矢量創建旋律，另一個嘗試根據產生的音樂對原始繪畫進行重構。從測試的情況看，在大約70％的案例中，音樂與繪畫的情緒相對應，後者是AI的原始資料。
在視覺形象與音樂的轉換方面，這不是第一個項目。提供交感體驗的音樂平臺Reify曾在幾年前推出一個名為Stylus的應用，可分析一首歌的結構、旋律、振幅等，然後將這些數據與高度、重量等關聯起來，設計、製作出雕塑。這種雕塑不僅可以擺放觀摩，還可以用來播放音樂。
Reify的應用是娛樂性的，而阿姆斯特丹大學的研究要嚴肅得多。研究人員希望像SynVAE這樣的AI能夠提供超越感官的藝術訪問，例如為盲人創造替代訪問。他們還希望在未來將其方法應用於進一步的感覺傳遞。
【數字敘事 Lighting】
分享到:
