當AI 成為音樂創作夥伴

Amo Wu
融聲創意 ZONE SOUND
12 min readOct 4, 2022
《Carole & Tuesday》(圖源:blerdyotome.com

我們曾在前一篇《Web3.0 聲音迭代實驗室》專欄中介紹聲音藝術家 Holly Herdon 在機器學習、人工智慧領域實驗解碼聲音的本質,認識她與Mat Dryhurst共同生下了「AI 嬰兒」 Spawn,而這次我們將介紹人工智慧碰上音樂產生了哪些火花,探索人類如何藉由AI技術解決音樂創作問題,甚至研發不同的工具讓即使沒有音樂背景人們也能嘗試作曲、建立新世代音樂創作平台與AI藝術家誕生。

激發音樂靈感,AI 成為你的音樂創作夥伴

談起人工智慧音樂,不禁讓我聯想一部故事背景設定於火星上,科技發達城市的音樂動畫《Carole & Tuesday》,其最特別的世界觀是人工智慧音樂。火星上的流行音樂大部分由AI操刀製作,藉由程式運算符合各種需求的編曲,透過歌手演唱完成歌曲。在動畫中AI音樂是萬能的,它不僅可以模擬出不同流行歌手的風格,也可以依據歌手、市場行銷、品牌推廣等需求,量身訂做專屬的音樂。

動畫中「藝術科學實驗室」中操控作曲AI的製作人Tao(圖源:Anime Locale

拉回到現實世界,許多人聽到AI創作相關詞彙總是會聯想到「他是否會威脅到人類?人類是否會被取代?」其實人工智慧擁有編曲能力並不代表音樂人將失去工作,AI正在做的工作為了讓更多才華音樂人不必花費大量的時間和高昂的成本學習和購買設備,就能將創意展現出來。何不將它視為一種服務,降低作曲障礙節省時間,讓它成為你的創作夥伴!

歷史告訴我們,音樂領域的新興技術導致了藝術爆炸。對於人工智慧歌曲創作,我相信這只是合適的創作者圍繞著它聚集起來製造下一次文化爆炸的時間問題。 -Amadeus Code創始人 Taishi Fukuyama

首張 AI 協作專輯發布

2017 年 8 月流行歌手 Taryn Southern發佈了與AI 新創公司Amper 音樂合作的首張單曲”Break Free”。 Taryn Southern 僅用鋼琴完成了旋律創作,提供音樂節奏、主旋律甚至偏好樂器參數予人工智慧程式,由 Amper 音樂產品負責編曲,在旋律中加入配樂,人工智慧程式產出的作品非常完整,包括了和聲、和弦,應用了多種樂器,最後由創作者進行微調。Taryn Southern專輯《 I AM AI 》發布證明了人可以與人工智慧合作,而不是人工智慧完全取代人類。

Taryn Southern與AI共同創作單曲”Break Free” (Youtube/ Taryn Southern channel)

輕易使用 AI 創意工具作曲

音樂創作者往往局限在自己喜歡的風格中,比如經常使用幾個和弦,時間越長越難突破,藉由人工智慧程式輔助創作時,則是完全不同的思維,常常會有很多驚喜,完成一首歌曲的時間比一般的音樂人快 20 倍。 日本新創Amadeus Code 是一個AI驅動的歌曲創作助手。為井上純先生擔任製作人時期看到作曲家在作曲想法中痛苦掙扎,希望有一個激發靈感的工具,Amadeus Code誕生了 。

Amadeus Code App頁面(圖源:minifan.com)

不同於傳統音樂資訊處理方法,透過AI算法將龐大音樂資訊庫中的樂曲,分解旋律成Licks並將它們轉換為數據,尋找之間的規律模式。音樂創作者可以透過瀏覽器或應用程式進行靈感激發,AI將根據使用者的偏好類別樂曲隨機生成,使用者可以調整音域、和弦旋律,下載demo後導入DAW完成編曲,歌曲的版權屬於使用者。

Licks 自動作曲的概念圖(來源:DTM station)

Amadeus Code 的目標是建立一個任何人都可以作曲的世界,並希望使用者感受到自己製作音樂的樂趣,特別是讓沒有作曲經驗或不是音樂家的人也能作曲。

Splash 為新世代打造音樂遊樂場

(圖源:music business worldwide)

製作音樂非常有趣,並且是我們最強大的自我表達形式之一。然而,仍有數百萬人試圖創作音樂卻失敗了。我們認為人工智慧將解決這個問題。
– CEO Stephen Phillips

POPGUN is leading the next generation of music AI

澳洲新創公司Splash(原名Popgun)相信 AI 將成為創意產業尤其是音樂領域變革力量。Splash願景是努力使音樂比以往都更容易獲得、更具互動性以及更有趣。2017年推出了第一個AI音樂應用項目《Alice》,可以與人類一起彈鋼琴,用自己的旋律回應他們演奏的內容。隨著項目的快速迭代發展了音樂製作插件《Splash Pro》,音樂家可以使用它來獲得由AI生成的鋼琴、貝斯、鼓和人聲作品,以導出到音樂家的DAW並在他們的項目中使用。近年更將Splash AI音樂製作應用至遊戲平台《Roblox》。從鋼琴合奏到青少年音樂遊戲平台,Splash致力為新世代打造音樂遊樂場。

《Alice》AI技術2017.01~2018.07間演變(Youtube/Stephen Phillips)

創意陪襯 Alice

Alice是一個與人類一起彈鋼琴的AI。Alice於2017年推出,最初學習鋼琴時一直使用與孩子們一樣的方式學習:聆聽成千上萬首歌曲和經驗豐富的演奏者,試圖模仿他們並大量練習。她透過聆聽並理解人類演奏的內容,以旋律回應她認為接下來可能會出現的內容。直到2017 年 8 月,Alice能夠即興創作:聆聽人們演奏,然後在保留其音樂性的同時對其進行修改。2018年年底,Alice不再需要任何人工輔助,嘗試創作各種風格的原創鋼琴作品。 Splash 將 Alice 視為音樂家的創意陪襯,以及鋼琴初學者的老師和演奏夥伴。他們認為這是一種新的、有趣地與音樂互動的方式,執行長Phillips曾舉例「讓我的女兒為了彈奏鋼琴拼命練習是錯誤的!玩音樂就像玩遊戲,當她與Alice遊戲般的合奏,就如同你和其他人一起遊玩一樣享受學習音樂。」

讓每個人都可以體驗製作音樂的樂趣

Splash發布了Ableton Live 軟體的專業音樂家導向插件Splash Pro,讓音樂家在自己的專案上工作時,可以快速創建原創的 AI 生成的作品,包括自定義鼓和人聲創意。

Splash Pro插件示範(Youtube/Stephen Phillips)

「世界上沒有這樣一個讓青少年聚在一起為彼此創作音樂的地方。那個地方需要存在,它就會存在,讓人工智慧發揮作用建造吧!」

隨其應用發展,Splash將其人工智慧產品轉化為大眾消費者使用,希望為沒有受過音樂訓練或樂器技能的人,特別是孩童、青少年提供了一種開始製作音樂的方式。手機音樂製作應用程式《Splash》誕生了,人們可以通過點擊代表節拍、循環和音效的網格來創作歌曲,而這些聲音是從人工智慧插件《Splash Pro》迭代製作,他們可以錄製他們的歌曲並添加封面藝術作品與全世界分享。

遊戲般 YouTube:Roblox

Roblox音樂創作介面(圖源:musically)

2020年5月《Splash》被帶到新項目Roblox遊戲平台時,人們可以使用該工具製作較短的DJ清單,在其他玩家跳舞和聊天的同時創作音樂。Roblox採用虛擬俱樂部的形式“Club Splash”,人們可以在其中使用 Splash 的聲音包為他們的朋友和其他 Roblox 玩家進行 DJ,包括嘻哈、trap 和 dubstep。他們可以購買化身服裝和舞台道具,同時從他們的套裝中賺取名望值和代幣。另外,開發人員和用戶都可以在社區中創建自己的遊戲提供大家遊玩。Roblox至少擁有1.15 億活躍用戶,其中青少年佔多數,Splash成功打造了新世代的音樂遊樂場。

Roblox遊戲平台介紹(Youtube/Splash)

AI 注入新的靈魂:虛擬音樂家

Auxuman虛擬藝人Yona(圖源:https://www.rewirefestival.nl/)

探索創意人工智慧中有趣的音樂應用之一:虛擬音樂家創作音樂,一個虛擬角色也可以像人類藝術家一樣發布音樂。不同於大家熟悉的虛擬藝術家,其背後音樂是由人類協助創作的,人工智慧生成的音樂家,其音樂和文字完全由人工智慧工具驅動,沒有人類在背後協助創作,而是引入新的「靈魂」。

“We want to use new tools to create new art, new experiences, new culture. The appeal is that these artists can really be vehicles for collaboration with the audience, so that (audience members)can selectively shape the live show.” — Chris McGarry

Authrntic Artists旗下虛擬音域家 (圖源:Mirror/Wwarpsound)

Authrntic Artists|DJ Dragoon、Nayomi 、Gnar Heart、Glitch

我們曾在前篇 《Web3.0 聲音迭代實驗室》專欄中曾介紹過Warpsound NFT項目中的虛擬音樂家DJ Dragoon、Nayomi 、Gnar Hear、Glitch。這些虛擬音樂家是來自於 Authrntic Artists公司,於2012年開始建構虛擬藝術家與人工智慧音樂,Authrntic Artists從趨勢潮流裡觀察到音樂娛樂發展,並以創造遊戲化的創新音樂體驗吸引眾人目光。該平台不僅僅只是重新組合人類創作的音樂元素,而是透過人工智慧自行生成音樂,Authrntic Artists更希望旗下虛擬藝術家擁有自主權,活得更真實。

(Youtube/ Authentic Artist)

Auxuman|Yona、Mony、Gemini、Hexe、Zoya

虛擬藝人Yona曾在倫敦的巴比肯亮相 (圖源:something curated

Yona 是由 Auxuman 創建的第一位創作者、虛擬藝人,同時也是音樂家 Ash Koosha 和藝術家 Isabella Winthrop 的心血結晶,Auxuman致力於打造虛擬藝人及其所生活的世界。他們提供了Yona創作自己的歌詞、和弦和旋律的能力,Yona學習環境來自於各大搜尋引擎,從詩歌到關於人類生活的文章,我們的語言驅動著 Yona音樂背後的詩意,同時也創造了她的數位生活。而她的音樂創作以電子音樂為主要風格,具有複雜性和情感深度,她甚至會透過線上為現場觀眾創作、唱歌和表演。

Auxuman旗下音樂藝人發行的兩張合輯(圖源:bandcamp/Anxuman)

Auxuman 2019年更成立了一個五人Yona、Mony、Gemini、Hexe 和 Zoya的虛擬藝人團隊,發行專輯《Auxuman Vol.1》收錄了 5 位虛擬藝術家的 10 首曲目,這個合輯中,儘管聽起來彷彿虛擬詩歌,YONA、GEMINI、MONY、HEXE和ZOYA,每一位虛擬藝人都散發出著自己的聲音特色與身份,同年年底更發行了《Auxuman Vol.2》。另外虛擬藝人Gemini與Yona也曾合作曲目Gemini-Hummingbird (feat. Yona)。

🎵+🗣️+🦾我們從創作夥伴、環境工具、藝術家等不同角度切入了解人工智慧與音樂的應用,人工智慧擁有編曲、創作能力真的並不代表人們將失去工作,或許一起用樂觀、開放心態期待未來人工智慧在音樂領域出現更多創意、創新應用。

參考資料

Amadeus Code
官方網站 / Medium
Taryn Southern
官方網站
- AI自動作曲機能でクリエイターを支援するサービス、Amadeus Codeがサービス開始
Splash官方網
-
Playing next door to Alice: Popgun reveals its music AI
-
AI-music startup Popgun launches consumer music-making app Splash
-
Popgun takes its AI-powered Splash music-making app to Roblox
-
Authrntic Artists is building virtual, AI-powered musicians
-
Auxuman launches AI-generated album with five virtual artists
-
AI Popstar Yona Makes Her Debut At The Barbican
-
Speaking to Yona, the AI singer-songwriter making haunting love songs

--

--

Amo Wu
融聲創意 ZONE SOUND

02:18 ━●━━━━━─────────── 19:94