研究人員開發實時歌詞生成技術來激發歌曲創作靈感
音樂藝術家可以利用滑鐵盧研究人員開發的技術為他們的歌曲創作找到靈感和新的創作方向。LyricJam 是一個實時系統,它使用人工智能 (AI) 為現場器樂生成歌詞,由大學自然語言處理實驗室的成員創建。
該實驗室由滑鐵盧工程計算機科學交叉任命的教授 Olga Vechtomova 領導,多年來一直在研究人工智能的創造性應用。
該實驗室的初步工作導致創建了一個系統,該系統可以學習藝術家的音樂表達并生成他們風格的歌詞。
最近,Vechtomova 與滑鐵盧的研究生 Gaurav Sahu 和 Dhruv Kumar 一起開發了一種技術,該技術依賴于音樂的各個方面,如和弦進行、節奏和樂器,以合成反映現場音樂表達的情緒和情感的歌詞。
當音樂家或樂隊演奏器樂時,系統會不斷接收原始音頻片段,神經網絡處理這些片段以生成新的歌詞。然后藝術家們可以使用這些臺詞來創作他們自己的歌詞。
“該系統的目的不是為藝術家寫一首歌,”Vechtomova 解釋說。“相反,我們希望幫助藝術家實現自己的創造力。該系統用新的隱喻和表達方式生成詩意的線條,有可能將藝術家引導到他們以前從未探索過的創作方向。”
研究人員設計的神經網絡學習與每個音頻剪輯中捕獲的音樂的不同方面相關聯的抒情主題、詞和風格裝置。
例如,研究人員觀察到,為環境音樂生成的歌詞與為歡快音樂生成的歌詞大不相同。
研究團隊進行了一項用戶研究,邀請音樂家在使用該系統的同時演奏現場樂器。
“一個意想不到的發現是,參與者感到被生成的臺詞鼓勵即興創作,”Vechtomova 說。“例如,這些臺詞激發了藝術家們以稍微不同的方式構建和弦,并將他們的即興創作朝著比原先預期的新方向發展。一些音樂家還使用這些臺詞來檢查他們的即興創作是否具有預期的情感效果。”
該研究的另一項發現強調了體驗的共同創造方面。參與者評論說,他們認為該系統是一個不加批判的干擾合作伙伴,即使他們沒有積極嘗試寫歌詞,他們也感到鼓勵演奏他們的樂器。
自 LyricJam 今年 6 月上線以來,全球已有超過 1,500 名用戶試用過。
該團隊的研究將于今年 9 月在國際計算創造力會議上發表,并已在 arXiv 上預先發布。