您現在的位置是:首頁 > 藝術

AI還會寫歌?研究報告AI可依據歌詞生成旋律

由 環球網 發表于 藝術2023-01-01
簡介“來自歌詞的旋律生成一直是人工智慧和音樂領域的一個具有挑戰性的研究問題,它能夠學習和發現有趣的歌詞和伴奏旋律之間的潛在關係

怎麼製作音樂旋律

AI還會寫歌?研究報告AI可依據歌詞生成旋律

從歌詞中生成音符序列可能聽起來像是科幻小說的內容,但人工智慧可能會把這變成普遍的現實。日前,在 Arxiv。org 上發表的一篇論文中,來自東京國立資訊學研究所的研究人員描述了一種能夠從已學習音節和音符關係產生“歌詞調節”旋律的機器學習系統。

“來自歌詞的旋律生成一直是人工智慧和音樂領域的一個具有挑戰性的研究問題,它能夠學習和發現有趣的歌詞和伴奏旋律之間的潛在關係。”該論文的共同作者寫道,“隨著現有歌詞和旋律資料集的發展以及AI,歌詞和旋律之間的音樂知識挖掘逐漸成為可能。”

正如研究人員解釋的那樣,音符有兩個音樂屬性:音高和持續時間。音高是聲音的感知屬性,其在頻率相關音階上透過高度或低度來組織音樂;而持續時間表示音調或音調被髮聲的時間長度。

研究人員的AI系統使用對齊資料與長短期記憶(LSTM)網路結。LSTM網路是一種能夠學習長期依賴性的遞迴神經網路,經過訓練,可以在音節和單詞級別學習聯合嵌入數學表示來捕捉歌詞的突出結構,隨著時間的推移就能學會在給出歌詞的同時預測旋律,同時考慮到歌詞和旋律之間的關係。

為了訓練它,該團隊編制了又12,197個MIDI檔案組成的資料集,每個檔案都配有歌詞和旋律對齊。在將語料庫分成訓練、驗證和測試並將它們嵌入模型之後,研究者進行了一系列測試以確定它預測的旋律與歌詞、MIDI、音符持續時間和休息持續時間順序對齊的程度。他們報告稱,他們所用的人工智慧系統不僅“在各個方面”都超越了基線模型,而且與人類音樂的分佈非常接近。

研究人員寫道:“音樂和人工智慧中歌詞的旋律生成仍然未得到很好的探索。利用深度學習技術製作旋律是一個非常有趣的研究領域,旨在瞭解和輔助人類的音樂創作活動。”

AI還會寫歌?研究報告AI可依據歌詞生成旋律

如果該研究未來能夠有所進展,人工智慧可能很快就會成為音樂家們的寶貴工具。今年7月,總部位於蒙特利爾的創業公司Landr籌集2600萬美元用於開發分析音樂風格的產品,以建立定製的音訊處理器,而今年早些時候,OpenAI和谷歌推出了利用音樂生成演算法的線上創作工具。最近,索尼的研究人員研究了特定條件下的kick-drum軌道生成的機器學習模型。讓AI從事作曲甚至更廣泛的音樂工作,似乎很快就不屬於天方夜譚。

推薦文章