色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

阿里讀唇AI幫助5億聽障人士

汽車玩家 ? 來源:venturebeat ? 作者:venturebeat ? 2019-12-06 16:00 ? 次閱讀

阿里又出黑科技。新的唇語閱讀 AI 系統在識別準確率表現上不僅超越基線標準,也優于專家級人類水平,有望為全球近 5 億聽障人士帶來福音。

阿里巴巴又出黑科技,AI 看唇語知內容!

實際上,能夠從視頻中讀取嘴唇的 AI 和機器學習算法并沒有什么不同。早在 2016 年,來自 Google 和牛津大學的研究人員就詳細介紹了一種系統,該系統可以 46.8% 的準確度注釋視頻錄像,這個表現明顯優于專業唇語識別人士 12.4% 準確度。但是,即使是最先進的系統,也難以克服唇語識別時的歧義問題,這使唇語 AI 的性能一直難以超越音頻語音識別

為了追求更好的性能,浙江阿里巴巴公司和史蒂文斯理工學院的研究人員聯合設計了一種方法,稱為 LIBS,該方法利用從語音識別器中提取的特征作為唇語識別時的補充信息。研究人員表示,LIBS 系統在兩個基準測試中都達到了業界領先的準確度,在識別字符錯誤率方面,LIBS 分別較基線性能高出 7.66% 和 2.75%。

LIBS 和其他類似的解決方案一樣,都可以幫助聽障人士觀看缺少字幕的視頻。據估計,全世界有 4.66 億人患有失能性聽力障礙,約占世界人口的5%。根據世界衛生組織的數據,到 2050 年,這一數字可能會超過 9 億。

LIBS 會從說話人的視頻中以多種不同尺度提取有用的音頻信息,包括序列級、上下文級和幀級。然后,系統會識別這些信息之間的對應關系,將數據與視頻數據進行對齊(由于開頭或結尾有時會出現采樣率不一致、視頻和音頻序列的長度不一致等情況),并利用過濾技術來優化蒸餾功能。


LIBS 系統架構示意圖

LIBS 的語音識別器和口語閱讀器組件均基于注意力的 seq2seq 體系結構,這是一種機器翻譯方法,可將序列的輸入(即音頻或視頻)映射到帶有標簽的輸出和注意力值上。研究人員對上述內容在 LRS2 和 CMLR 數據集上進行了訓練,LRS2 包含來自 BBC 的 45000 多個口語句子,CMLR 則是最大的中文普通話口語語料庫,包括了來自中國網絡電視臺網站的 10 萬余個自然句(包括 3000 多個漢字和 20000 多個短語)。

不過,研究團隊也表示,由于某些句子長度太短,該模型難以在 LRS2 數據集上實現“合理的”結果。(解碼器從少于 14 個字符的句子中提取相關信息時會遇到困難。)但是,一旦對最大長度為 16 個單詞的句子進行了預訓練,解碼器將可以通過對上下文級別的知識進行設置,提高 LRS2 數據中句子結尾部分的質量。

研究人員在描述其工作的論文中寫道:“ LIBS 減少了對無關框架的關注。” “幀級知識提煉進一步提高了視頻幀特征的可分辨性,使注意力更加集中。”

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • AI
    AI
    +關注

    關注

    87

    文章

    30762

    瀏覽量

    268905
  • 語音識別
    +關注

    關注

    38

    文章

    1739

    瀏覽量

    112635
  • 阿里
    +關注

    關注

    6

    文章

    438

    瀏覽量

    32828
收藏 人收藏

    評論

    相關推薦

    阿里國際推出全球首個B2B AI搜索引擎Accio

    近日,在歐洲科技峰會Web Summit上,阿里國際正式推出了全球首個B2B領域的AI搜索引擎——Accio。這一創新產品面向全球商家開放,標志著阿里國際正式入局當前備受矚目的AI S
    的頭像 發表于 11-15 16:53 ?692次閱讀

    阿里達成股東訴訟和解協議 阿里同意支付超30元和解

    阿里的消息總是被大家關注;我們看到在26日,阿里巴巴集團發布了一份公告,公告中稱阿里同意支付4.335美元(換算下來約30.87元人民幣
    的頭像 發表于 10-28 16:28 ?346次閱讀

    阿里巴巴季報出爐 阿里云二季度營收增長6%

    調整EBITA利潤達到450.35阿里巴巴的季度經營業績超出市場預期。AI則是一個大亮點;AI正推動阿里云重回增長。
    的頭像 發表于 08-16 16:45 ?494次閱讀

    阿里云推出首個域名AI大模型應用

    阿里云近日宣布其域名產品服務已全面完成AI化升級,并成功推出首個基于通義大模型的域名AI應用。此次升級不僅引入了“.ai”等40多個熱門新域名后綴,還納入了2000萬個全球域名資源,極
    的頭像 發表于 08-09 14:55 ?503次閱讀

    Cohere融資5美元,加速AI賽道競爭步伐

    據最新金融時報報道,加拿大人工智能初創企業Cohere在最新一輪融資中成功籌集了高達5美元的資金,這一壯舉不僅鞏固了其在全球AI領域的領先地位,也顯著提升了其與行業巨頭如OpenAI
    的頭像 發表于 07-23 14:38 ?528次閱讀

    阿里巴巴完成50美元可轉換優先票據發行

    阿里巴巴已向美國證券交易委員會遞交了6-K表格,內容涉及已完成的私募發行,其中包括初始購買者有權額外購買最多5美元(約合36.3元人民幣)的票據。
    的頭像 發表于 05-30 10:20 ?496次閱讀

    阿里與京東將發行可轉債,擬募集超50美元資金

    5 月 23 日消息,彭博社透露,阿里巴巴正在考慮發行可轉債籌集大約 50 美元資金,以支持股票回購及業務增長。據悉,阿里已與投行溝通發行事宜,且最早有望于本周啟動發行程序。
    的頭像 發表于 05-23 16:13 ?667次閱讀

    阿里云 all in AI 的決心

    “第一個提出MaaS的阿里云,能否成為云廠商在AI時代變革的新范本?”如何抓住AI的機會?這是進入大模型時代后,面對新的起點,各大云廠商在不斷思考的問題。毋庸置疑,AI與云已經成為緊密
    的頭像 發表于 05-17 08:04 ?323次閱讀
    <b class='flag-5'>阿里</b>云 all in <b class='flag-5'>AI</b> 的決心

    阿里宣布派發約40美元股息 財報顯示AI相關收入實現三位數同比增長

    阿里宣布派發約40美元股息 財報顯示AI相關收入實現三位數同比增長 日前,阿里巴巴集團發布了2024財年Q4及全年業績數據;財報顯示阿里
    的頭像 發表于 05-15 12:13 ?770次閱讀

    虹軟PhotoStudio AI入駐阿里1688平臺,加碼B2B商拍服務!

    虹軟PhotoStudio? AI(簡稱PSAI)喜迎新進展,已于5月11日正式入駐阿里1688平臺,將為數千萬網商提供高效、便捷的AI商拍服務。
    的頭像 發表于 05-13 11:43 ?594次閱讀
    虹軟PhotoStudio <b class='flag-5'>AI</b>入駐<b class='flag-5'>阿里</b>1688平臺,加碼B2B商拍服務!

    創客打造智能眼鏡,助人士理解手語

    據悉,知名創客Nekhil近期將樹莓派進行深度改裝,成功研發出一款可用于解讀手語的智能眼鏡,以解決人士的溝通問題。
    的頭像 發表于 04-23 15:32 ?460次閱讀

    阿里云內部全面推行AI寫代碼

    阿里云正在內部全面推行 AI 編程,使用通義靈碼輔助程序員寫代碼、代碼、查 BUG、優化代碼等。
    的頭像 發表于 04-07 09:22 ?557次閱讀

    阿里大模型“通義悟”升級

    阿里旗下的強大模型產品“通義悟”近日迎來了一系列功能升級,其中包括備受矚目的音視頻問答助手“小悟”的正式上線。這一新功能憑借出色的多語言Query處理能力、長篇章文本理解能力以及指令演化框架優化
    的頭像 發表于 03-21 11:30 ?1027次閱讀

    大模型初創公司MiniMax估值超25美元

    近日,據業內消息人士透露,阿里巴巴集團已經領投了中國AI初創公司MiniMax的新一輪融資,此次融資后,MiniMax的估值已經飆升至超過25美元,顯示出市場對該公司的高度認可與期待
    的頭像 發表于 03-07 10:39 ?1464次閱讀

    讓“聾人”看到聲音 行空板 —“AI助聽器”

    世界上有各種各樣的殘障人士,這些人或不能說話,或聽不見聲音。聾人,是聽力因先天遺傳或后天人為因素而受損的殘疾人,也叫聽力障礙者,簡稱人。根據最近的全國人口普查統計,全中國大約有2700多萬
    的頭像 發表于 01-12 13:12 ?436次閱讀
    主站蜘蛛池模板: 99久久精品毛片免费播放| 国产精品久久久久久日本| 国产毛多水多高潮高清| 男人的天堂MV在线视频免费观看| 亚洲av欧美在我| www.青青草原| 久久婷婷久久一区二区三区| 午夜想想爱| 动漫美女被到爽了流| 美女的避毛| 伊人久久亚洲综合天堂| 国产精品人妻无码久久久蜜桃臀 | 日韩精品特黄毛片免费看| 在线中文字幕网站| 和美女啪啪啪动态图| 手机在线免费观看毛片| yellow在线中文| 蜜桃日本MV免费观看| 一级做a爰片久久毛片一| 国产亚洲精品在浅麻豆| 色欲国产麻豆一精品一AV一免费| 99视频免视看| 龙岩综合频道| 欲香欲色天天天综合和网| 国语92电影网午夜福利| 小玲被公扒开腿| 国产成人久久精品激情| 日本美女靠逼| thermo脱色摇床安卓下载| 免费高清毛片| 6080yy奇领电影在线看| 快穿女主有名器的H纯肉黄暴拉文 快插我我好湿啊公交车上做 | pkf女尸studiosxnxx| 魅男mangay| 最新亚洲一区二区三区四区| 久久久久久久网站| 一抽一出BGM免费3分钟| 精品亚洲一区二区在线播放| 亚洲女人网| 精品人妻伦九区久久AAA片69| 亚洲精品国产拍在线观看|