近日,小米推出了全面支持情感化語(yǔ)音交互的小米小愛(ài)音箱Art,小米也成為業(yè)內(nèi)首家情感化TTS大規(guī)模落地的企業(yè)。
基于開(kāi)心、關(guān)心、害羞等有限但類型不同的情感音頻數(shù)據(jù),通過(guò)不同技術(shù)訓(xùn)練并迭代聲學(xué)模型,這款音箱支持情感TTS合成,并實(shí)現(xiàn)了“小愛(ài)同學(xué)”的音感化、擬人化。
隨著人工智能技術(shù)的發(fā)展,在實(shí)現(xiàn)人機(jī)對(duì)話的基礎(chǔ)上,各大AI企業(yè)都在情感化語(yǔ)音交互的領(lǐng)域積極展開(kāi)探索。
例如在智能客服領(lǐng)域,當(dāng)用戶的問(wèn)題無(wú)法解決或者問(wèn)題表述不清時(shí),智能客服很有可能無(wú)法識(shí)別用戶的情緒、進(jìn)行進(jìn)一步操作,從而引發(fā)用戶的不滿和投訴。
針對(duì)這一情況,日本NTT研究所研發(fā)出一款客服電話情感識(shí)別系統(tǒng),對(duì)用戶的電話語(yǔ)音進(jìn)行收集處理,如果未檢測(cè)到用戶憤怒的情感,則繼續(xù)當(dāng)前的語(yǔ)音服務(wù);如果檢測(cè)到憤怒的情感,則轉(zhuǎn)為人工服務(wù)進(jìn)行業(yè)務(wù)處理。
語(yǔ)音情感識(shí)別通常指機(jī)器從語(yǔ)音中自動(dòng)識(shí)別人類情感和情感相關(guān)狀態(tài)的過(guò)程。通過(guò)分析說(shuō)話人情緒使機(jī)器進(jìn)行擬人化的互動(dòng),識(shí)別說(shuō)話人的情感成為語(yǔ)音技術(shù)發(fā)力的一個(gè)新熱點(diǎn)。
語(yǔ)音情感識(shí)別包括兩種,NTT推出的客服電話情感識(shí)別系統(tǒng)屬于只通過(guò)聲音來(lái)分析情感。這一情感語(yǔ)音識(shí)別模型的落地應(yīng)用離不開(kāi)訓(xùn)練數(shù)據(jù)的支撐。
數(shù)據(jù)堂深耕于AI數(shù)據(jù)領(lǐng)域近十年,一直致力于為全球人工智能企業(yè)提供專業(yè)的數(shù)據(jù)服務(wù),行業(yè)內(nèi)高標(biāo)準(zhǔn)的語(yǔ)音情感識(shí)別訓(xùn)練數(shù)據(jù)《20人英文情感語(yǔ)音麥克風(fēng)采集數(shù)據(jù)》和《30部電影語(yǔ)音視頻標(biāo)注數(shù)據(jù)》廣受重視和好評(píng)。
語(yǔ)音情感識(shí)別的另外一種模型就是結(jié)合聲音和圖像的多模態(tài)情感分析。
機(jī)器人Pepper就是應(yīng)用多模態(tài)情感分析的典型案例。
Pepper是由日本軟銀集團(tuán)和法國(guó)Aldebaran Robotics研發(fā)的一款人形機(jī)器人,可綜合考慮周圍環(huán)境,積極主動(dòng)地作出反應(yīng)。
Pepper配備了語(yǔ)音識(shí)別技術(shù)以及分析表情和聲調(diào)的情緒識(shí)別技術(shù),經(jīng)過(guò)定制化開(kāi)發(fā),可通過(guò)表情、動(dòng)作、語(yǔ)音與人類交流、反饋,甚至能夠跳舞、開(kāi)玩笑。
如今在商業(yè)領(lǐng)域,全球超過(guò)2000家企業(yè)應(yīng)用了Pepper,服務(wù)于零售、金融、健康護(hù)理等眾多行業(yè)。
麻省理工學(xué)院媒體實(shí)驗(yàn)室分拆公司Affectiva通過(guò)語(yǔ)音和面部數(shù)據(jù)打造了情感檔案,其神經(jīng)網(wǎng)絡(luò)SoundNet可以在短短1.2秒內(nèi)識(shí)別出音頻數(shù)據(jù)中的憤怒情緒。
除了憤怒,人的情感從大類上可分為高興、悲傷、失望、驚訝等面部情感,從內(nèi)心情感上還可細(xì)分為:尷尬、猶豫、贊同、羨慕等。這些情感可以用VAD方法進(jìn)行量化打分。
所謂VAD,是指Valence、Arousal、Dominance三個(gè)衡量維度。
· Valence(效價(jià)),指達(dá)到目標(biāo)對(duì)于滿足個(gè)人需要的價(jià)值,同一個(gè)目標(biāo)對(duì)每一個(gè)人可能有三種效價(jià):正、零、負(fù)。
· Arousal(積極程度),即精神+身體共同體現(xiàn)出的積極程度,如充滿活力或死氣沉沉。
· Dominance(優(yōu)勢(shì)度),表示個(gè)體對(duì)情景和他人的控制狀態(tài),如憤怒就屬于優(yōu)勢(shì)度高的情感,而恐懼屬于優(yōu)勢(shì)度低的情感。
數(shù)據(jù)堂一直致力于開(kāi)發(fā)個(gè)性化的機(jī)器訓(xùn)練數(shù)據(jù),并將數(shù)據(jù)和服務(wù)落地到AI產(chǎn)品和業(yè)務(wù),為人們帶去更好的產(chǎn)品體驗(yàn),讓每個(gè)人都能享受人工智能帶來(lái)的美好生活。
聯(lián)系客服