近日，網(wǎng)易集團(tuán)、網(wǎng)易公益聯(lián)合浙江省殘疾人福利基金會(huì)發(fā)起 " 人生第一句 " 聲音復(fù)原公益計(jì)劃，利用網(wǎng)易互娛 AI Lab 的 iSpeech 技術(shù)打造首個(gè) AI 復(fù)原聽(tīng)障人士原聲的工具。

聽(tīng)障人士?jī)H需在「音書(shū) APP」上傳 2 分鐘沒(méi)有完整語(yǔ)義的發(fā)聲片段，之后在產(chǎn)品中輸入想要表達(dá)的文字，就可以用原本的聲音說(shuō)出來(lái)。

目前該產(chǎn)品已向全國(guó)聽(tīng)障人士免費(fèi)開(kāi)放，幫助他們無(wú)障礙、有情感地與外界交流，用自己的聲音說(shuō)出 " 人生第一句 "。

不久前，浙江省殘疾人福利基金會(huì)面向浙江特殊教育職業(yè)學(xué)院的學(xué)生和「音書(shū) APP」的部分用戶(hù)開(kāi)展調(diào)研。

調(diào)研結(jié)果顯示，僅有十分之一的受訪對(duì)象能夠通過(guò)簡(jiǎn)單的口語(yǔ)與身邊的人進(jìn)行交流，他們中的大多數(shù)，最大的夢(mèng)想便是能說(shuō)出 " 人生第一句 "。

網(wǎng)易互娛 AI Lab 技術(shù)總監(jiān)林悅告訴 36 氪，目前市面上絕大多數(shù)語(yǔ)音克隆產(chǎn)品，需要比較完整、有一定時(shí)長(zhǎng)的語(yǔ)段，不適合相對(duì)發(fā)音困難的聽(tīng)障人士使用。

此次研發(fā)歷時(shí)兩個(gè)月，網(wǎng)易互娛 AI Lab 研發(fā)團(tuán)隊(duì)用上了 iSpeech 技術(shù)，基于海量數(shù)據(jù)的預(yù)訓(xùn)練模型，加上聽(tīng)障人士極少量的純語(yǔ)音數(shù)據(jù)快速微調(diào)算法模型，在快速克隆新的說(shuō)話(huà)人音色的同時(shí)，保留基礎(chǔ)模型的內(nèi)容發(fā)音能力。

林悅表示，這次研發(fā)的難點(diǎn)在于，從極短的無(wú)語(yǔ)義語(yǔ)音中提取到個(gè)人聲音特征。正常的語(yǔ)音合成技術(shù)往往需要半小時(shí)到一個(gè)小時(shí)的語(yǔ)料建模，而網(wǎng)易團(tuán)隊(duì)克服了技術(shù)難度，僅需要聽(tīng)障者發(fā)出的兩分鐘簡(jiǎn)單音節(jié)，就取得了效果。

一位聽(tīng)障理發(fā)師使用該技術(shù)與母親通話(huà)時(shí)，母親聽(tīng)到 " 兒子的聲音 " 后非常激動(dòng)，稱(chēng)從未想過(guò)能聽(tīng)到兒子說(shuō)話(huà)。這名理發(fā)師說(shuō)，能用自己的聲音與人交流，可以大大提升自信心。

網(wǎng)易宣布，這項(xiàng)技術(shù)研發(fā)遵循 " 科技向善 " 的理念，供聽(tīng)障人群免費(fèi)使用，希望能提高他們的生活便利性。

接下來(lái)，網(wǎng)易團(tuán)隊(duì)希望利用 AI 技術(shù)，賦予合成語(yǔ)音以情感表達(dá)能力，讓聽(tīng)障人士通過(guò)語(yǔ)音傳遞更豐富的情感。

據(jù)了解，此次運(yùn)用的 iSpeech 技術(shù)原是由網(wǎng)易互娛 AI Lab 針對(duì)游戲場(chǎng)景推出的 AI 創(chuàng)作工具，已落地服務(wù)于《大話(huà)西游》《一夢(mèng)江湖》《荒野行動(dòng)》等 10 余項(xiàng)游戲項(xiàng)目產(chǎn)品之中。

通過(guò)這次研發(fā)，這項(xiàng)技術(shù)在游戲的使用場(chǎng)景也有更多可能性。林悅舉例，游戲里會(huì)有給 NPC 角色定制語(yǔ)音包的需求，這項(xiàng)技術(shù)將減輕研發(fā)人員的負(fù)擔(dān)，不再需要嚴(yán)格按照文本錄制聲音，只需日常的說(shuō)話(huà)語(yǔ)音，就能達(dá)到效果。

本文僅代表作者觀點(diǎn)，版權(quán)歸原創(chuàng)者所有，如需轉(zhuǎn)載請(qǐng)?jiān)谖闹凶⒚鱽?lái)源及作者名字。

免責(zé)聲明：本文系轉(zhuǎn)載編輯文章，僅作分享之用。如分享內(nèi)容、圖片侵犯到您的版權(quán)或非授權(quán)發(fā)布，請(qǐng)及時(shí)與我們聯(lián)系進(jìn)行審核處理或刪除，您可以發(fā)送材料至郵箱：service@tojoy.com