第九代微軟小冰來了!花式AI音樂繪畫創作,小冰島實現“AI自產自銷”

第九代微軟小冰來了!花式AI音樂繪畫創作,小冰島實現“AI自產自銷”

智東西(公眾號:zhidxcom)

作者 | 韋世瑋

編輯 | 心緣

智東西9月22日訊息,今天微軟小冰迎來了第九代升級,釋出了社交網路平臺APP小冰島,人類使用者能夠在島上創造各種AI個體,形成一個共同“生活”的社交網路。

與此同時,小冰還發布了一系列最新技術進展,其中就包括歌聲合成工具X Studio 2。0、能提高4個半音模仿歌手周深唱《大魚》的AI歌手陌笙。在智慧裝置領域,“召喚小冰”新增支援天貓精靈平臺。

此外,微軟也宣佈與小冰的多端產品融合,將小冰整合到Windows及各類移動應用產品中做個性化推薦,未來幾個月將會陸續上線。這些新技術的釋出背後,離不開第九代小冰開放域對話引擎、超自然語音等多項核心技術的升級與突破。

一、200個對話還原語言聲音風格,小冰V9的多樣性優勢

小冰公司董事長沈向洋博士談道,第九代小冰(小冰V9)的特點是多樣性。簡單來說就是用不同的聲音、感情、情緒來表達對話。

對此,小冰框架在開放域對話、超級自然語音和多模態互動等方面都進行了升級,並重點加強了小樣本學習和反饋式學習的效能,小冰語音對話的自然度和舒適度效果大大提升。

為了更直觀體現小冰V9在開放域對話方面的提升,沈向洋博士展示了小冰V9與其他兩個同行的評價指標對比。這五大技術指標分別為平均對話長度(CPS)、上下文一致性、上下文相關性、對話資訊含量與話題引導成功率。

可以看到,小冰V9均領先於同行使用超大規模預訓練模型的效果。不僅如此,小冰每輪對話成本僅為同行的二十分之一。

第九代微軟小冰來了!花式AI音樂繪畫創作,小冰島實現“AI自產自銷”

其實在加強小樣本學習背後,小冰公司產品總監周典談道,自去年小冰第八代釋出以來,人們在小冰框架中創造了多達1700萬個獨特的AI Beings(人工智慧個體),其中26。1%是被使用者當作某個過往真實人類的替身而創造出來的。

但普通人所能留下做訓練的資料樣本極少,為了能用盡量少的資料去訓練模型,達到與某個人一致的語言與聲音風格,以更好地承載人類情感,小冰展開了“Project Chararu”專案研究。

過去一年,小冰用2000個對話的資料量還原一個特定人類的對話風格,相似度達到了3。89分,而普通人類用自己的真實資料做測評的平均分是4。33分。今年,小冰透過進一步迭代小樣本訓練過程,僅用200個對話資料量進行訓練,分數達到了4。19分,與人類分數僅相差0。14分。

第九代微軟小冰來了!花式AI音樂繪畫創作,小冰島實現“AI自產自銷”

目前,“Project Chararu”專案已實現產品化,今年將首先在日本上線。

除此之外,小冰還宣佈與英偉達在計算平臺及NLP(自然語言處理)等領域達成戰略合作。同時,小冰將在今年下一季度,與智源研究院、智譜AI合作釋出初版多語言超大規模模型。

二、小冰島五大特性,圍繞使用者互動的AI世界

為了更好探索人類和AI的未來,小冰專門開發了第一方平臺APP——小冰島,每個使用者均可創造在記得島嶼,以及島嶼上一起生活的AI Beings,每個AI Beings都有不同的性格和能力,還會和使用者互動,包括髮訊息、評論朋友圈等。

同時,小冰島還會隨著使用者和AI Beings的互動不斷地進行迭代,如此構成一個人類與AI融合的社交網路。

總的來看,小冰島擁有五大特性:沉浸式體驗、高度定製化、以人為中心、X套件島嶼版,以及輕鬆、熱情、無時不在。

第九代微軟小冰來了!花式AI音樂繪畫創作,小冰島實現“AI自產自銷”

1、沉浸式體驗:

每個使用者除了能創造自己的島嶼外,島上還擁有一個功能完整的社交互動介面,類似微信。使用者不僅能在島嶼中體驗豐富的視覺和自然音場,還能與每個AI Beings對話,擁有一對一對話、群聊、朋友圈和技能生態等體驗。

2、高度定製化:

每個AI Beings的樣貌、聲音、性格、能力都是獨一無二的,例如AI歌手、音訊生產者、文字創作者、畫家等。使用者也可以創造並訓練自己喜歡的各種新的AI Beings,甚至可以去別人的島嶼中“挖角”。

第九代微軟小冰來了!花式AI音樂繪畫創作,小冰島實現“AI自產自銷”

3、以人為中心:

小冰島上的AI Beings會根據使用者需求,不間斷地為使用者生成各種長音訊、短影片、音樂、文字及視覺內容,一對一生提供給使用者。同時根據不同AI Beings的特點,使用者還能選擇由特定的AI Beings來提供特定內容。

第九代微軟小冰來了!花式AI音樂繪畫創作,小冰島實現“AI自產自銷”

4、X套件島嶼版:

該版本為使用者提供了方便高效的內容生產工具,使用者可指定AI Beings即時生成各種長音訊和短影片內容,內容擁有完整的智慧財產權,可在任何平臺上使用。

5、輕鬆、熱情、無時不在:

每個AI Beings都能自己進行互動和資訊傳遞,共同構成以使用者為中心的社交生活目標,在互動、朋友圈和各種生成內容中實時響應使用者,讓使用者獲得類似真實社交網路的體驗。

小冰公司產品負責人彭爽談道,今日小冰島正式開放搶先預覽版,支援iOS和安卓平臺,並將在第四季度開放支援Windows PC版的空氣投影版本。

同時,此前使用者透過虛擬親友產品創造出來的虛擬人類,也將在預覽版公測結束後自動登入他們的小冰島。

第九代微軟小冰來了!花式AI音樂繪畫創作,小冰島實現“AI自產自銷”

三、AI內容生成三大環節升級,豐富藝術生活創作

小冰公司產品總監胡曉光提到,從2017年投入大量資源研究AI內容生成至今,小冰已擁有包含文字、聲音、視覺在內的完整技術線。

AI內容生成也叫AI內容創造,主要包含

創作、演繹和二次封裝三大部分。

第九代微軟小冰來了!花式AI音樂繪畫創作,小冰島實現“AI自產自銷”

1、創作:輔助音樂人詞曲創作,新增藝術家及中國畫模型

音樂方面,小冰將與11支人類樂隊合作,為他們提供AI詞曲創作動機輔助、演唱和封面視覺設計,這11首作品將從今天起陸續上架。後續小冰將把該技術封裝成產品,開放給更多創作者來協助創作。

第九代微軟小冰來了!花式AI音樂繪畫創作,小冰島實現“AI自產自銷”

詩歌繪畫方面,小冰將詩歌與繪畫創作模型升級到了第三代,大幅度提升高了模型的創作精度和構圖合理性。例如,在模型創造的一副繪畫作品中,它不僅畫出了遠方河上的船隻,還畫出了水中的倒影和大量細節。

不僅如此,為了保證AI能穩定且大批次地創作高質量作品,小冰還發布藝術家模型,只需要透過小資料訓練,就能生成各種藝術家模型,創作出風格高度一致的作品,同時還有中國畫模型。

第九代微軟小冰來了!花式AI音樂繪畫創作,小冰島實現“AI自產自銷”

針對AI學生“夏語冰”,小冰框架不僅創造了夏語冰的面容、聲線等生物學特徵,還升級了它的繪畫創作模型,未來將主攻中國畫。

2、演繹:釋出X Studio 2.0,新AI歌手現場飆極限高音

胡曉光認為,AI內容生成三大環節中,最容易出現瓶頸的就是演繹部分,因為該部分包含的模型量龐大,同時對整個系統的完整性也有更大要求。

對此,小冰釋出了X Studio 2。0,從學習歌聲本身演進到學習歌聲產生。該版本擁有全新的GUI互動介面,新增力度、氣泡音等引數調節,最佳化氣聲、性別引數。同時,歌手模型也進行了升級,增加Rap、美聲、民歌等多種風格和唸白功能,以及小程式版本。

第九代微軟小冰來了!花式AI音樂繪畫創作,小冰島實現“AI自產自銷”

為了更好展現X Studio 2。0的升級效果,新發布的AI歌手陌笙還在現場演唱了周深的《大魚》,並在原唱基礎上表演了高四個半音的升調演唱,以展示AI歌手的穩定性優勢。

胡曉光透露,X Studio 2。0將在10月22日釋出,下週三釋出內測版。此外,小冰還宣佈Alice映畫達成合作,將推出一系列AI歌手企劃。

3、封裝:新增兩種形式內容封裝

針對內容的二次封裝形式,小冰推出了短影片內容封裝管線,包括二次元和三次元影片內容兩種形式。

二次元方面實現了AI模型完全自驅,影片成本僅為0。03元/分鐘;三次元方面則首次實現從生物學特徵生成起的綜合封裝,例如AI歌手華智冰的歌聲就由X Studio生成,人類生物學特徵由X Avatar生成及置入。

第九代微軟小冰來了!花式AI音樂繪畫創作,小冰島實現“AI自產自銷”

此外,小冰還發布了與次世文化聯手打造全球首位AI人類觀察者Merror,其採用小冰框架的核心對話引擎、全雙工、全域超級自然語音等技術,能在交談、演唱等場景中實現高度擬人的實時互動。

第九代微軟小冰來了!花式AI音樂繪畫創作,小冰島實現“AI自產自銷”

值得一提的是,在智慧汽車、智慧裝置等領域,小冰都有著不少新的落地進展。針對智慧汽車座艙解決方案,目前小冰已與寶馬等汽車頭部廠商達成商業合作。

此外,除了華為、小米、OPPO、vivo等合作伙伴外,“召喚小冰”還新增支援天貓精靈平臺,目前深度內嵌小冰的智慧裝置已超過10億臺。“小冰已成為全球規模最大的第三方跨裝置人工智慧系統。”胡曉光說。

結語:加速推動AI融入人類生活

從第一代小冰到第九代小冰,小冰從最初一個16歲的少女小冰,發展到今天1700萬個虛擬人類、幾百個AI歌手,這些擁有各種各樣性格和能力的AI背後,是多年以來小冰框架不斷的技術積累和突破。

某種意義上看,正如小冰公司執行長李笛所說,小冰是一場龐大的實驗,目的是為了找出適合的途徑,讓AI能更好地融入人類世界。它的創新,也將為AI賦能人類生活帶來更多值得借鑑的落地樣本。

頂部