在強化學(xué)習記憶方面,多模態(tài)比單一模態(tài)有效性提高了60%以上。
多知網(wǎng)9月20日消息,英國AI公司Emotech 聯(lián)合華為,在HUAWEI CONNECT 2019全球大會上首發(fā)了全球第一款多模態(tài)AI英語口語教評解決方案。
據(jù)介紹,本次發(fā)布成果在多模識別、評測、反饋及糾錯功能突破了現(xiàn)有AI測評精準度及傳統(tǒng)英語教學(xué)標準化的壁壘,實現(xiàn)了全天候、一對一個性化、精準化教學(xué)及測評?,F(xiàn)有技術(shù)純語音和文字的反饋往往有理解偏差且效率不高,而多模技術(shù)能提供音視頻混合的錯誤點回放和正確發(fā)音示例,如真人老師一對一教學(xué),提升學(xué)習效率。尤其是在強化學(xué)習記憶方面,多模態(tài)比單一模態(tài)有效性提高了60%以上。
并且,多模態(tài)技術(shù)解決了傳統(tǒng)的純語音技術(shù)對于安靜環(huán)境的嚴苛要求、雜音造成的理解偏差、音軌比對效率低等突出問題。它有效提高了發(fā)音評測系統(tǒng)(PA)、語音識別( ASR)的準確率,在給定噪音環(huán)境下,與單模態(tài)產(chǎn)品相比,它的準確率提高了30%以上。
Emotech作為一家AI公司,首次嘗試將人工智能中的多模態(tài)與主動交互技術(shù)應(yīng)用于英語口語教學(xué)及測評。Emotech創(chuàng)始人莊宏斌表示:“多模態(tài)英語助教方案可以通過更真實地還原教學(xué)測互動場景,從而更高效地協(xié)助老師、學(xué)生以及教育機構(gòu)提升學(xué)習效果?!?/p>
華為云通用AI服務(wù)總經(jīng)理、語音語義創(chuàng)新Lab主任、首席科學(xué)家袁晶說道:“Emotech在語音和多模態(tài)AI方面有先進的技術(shù),華為云擁有全棧的AI平臺,并在自然語言處理領(lǐng)域有深厚的積累和實踐,雙方聯(lián)合研發(fā)并取得一定突破,這是個非常好的開始?!?/p>