色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

支持情感TTS,小愛音箱Art聲學技術重磅升級!

姚小熊27 ? 來源:北國網 ? 作者:北國網 ? 2020-06-17 15:48 ? 次閱讀

近日,小米發布了小愛音箱Art,這款音箱采用全新的金屬機身,機身揚聲器開孔被設計成0.7mm厚度的金屬飾板,可謂功能與質感兼具。小米小愛音箱Art通過一顆2.5英寸的全頻揚聲器,讓聲音的細節呈現得更加自然。

作為小米推出的第9款智能音箱,小米小愛音箱Art在技術上也全面升級,搭載第三代小愛同學,并支持情感化語音交互、全屋播放及就近喚醒。通過這款音箱得以看出,小米的聲學語音技術已經實現全面自研,并在自研部分領域持續。

情感化語音交互:通過迭代聲學模型,支持情感TTS

對于智能設備而言,實現情感化語音交互是一項挑戰。“情感”本身就是主觀的、多樣的感受,一種情感可以有多種呈現形式,更適合人與人的面對面對話。情感化語音交互對技術要求較高,要技術方、數據方、質檢方等多方對情感濃度、情感詮釋方式等標準達成共識,將較主觀的情感音素統一化、標準化。

隨著人工智能技術的發展,在實現人機對話的基礎上,各大廠商都在情感化語音交互的領域探索。為了讓機器加入情感元素,小米AI實驗室在“情感數據量有限”的前提下,通過不同聲學模型、不同聲碼器組合最終上線自然、擬人效果的情感TTS,成為業內首 家情感化TTS大規模落地的企業。

通過小米AI實驗室的不斷深耕,此次小米小愛同學Art全面支持情感化語音交互,基于有限但類型不同的情感音頻數據(如開心、關心、害羞、驚訝等),通過不同技術訓練并迭代聲學模型,最終支持情感TTS合成并實現“小愛同學”音感化、擬人化。

未來,小米語音將升級此技術——支持情感TTS實時合成。從下圖中可以看出,在大數據集的預訓練模型基礎上,利用目標說話人的中性情感數據對網絡進行微調,得到目標說話人的中性情感模型;在此基礎上用帶情感的小批量數據對模型進一步微調,最終得到不同情感的模型,最終實現情感合成。

在國內語音助手行業中,小米首 次實現情感化TTS的大規模落地,未來將打造情感更加豐富的“小愛同學”,為用戶提供多元化的語音交互體驗,為IoT設備增加更豐富更立體更逼真的語音交互體驗。

語音支持全屋播放:立體聲組合同步播放相同音頻

小米小愛音箱Art,是首 款可以實現語音支持全屋播放的設備。用戶直接對小愛同學說“全屋播放XX”,無需提前在App端進行手動設置,即可實現一句話語音交互,為用戶提供了更便捷的使用方式。

要實現這一功能,音箱需要具備AIoT放音的技術。小米AIoT放音的自研技術在攻克無線網絡抖動、晶振時鐘漂移以及弱網下數據不可達等一系列技術難題后,將不同音箱播放聲音的同步優化到微秒級別,同時還實現了在不同型號的音箱之間的數據同步,提供更細膩的音質和寬廣的聲像。

立體聲支持APP創建組網,才能進行語音指令和APP操作播放,全屋播放同時支持語音指令和APP創建組網。

立體聲功能同時支持語音指令和app操作播放,云端音頻流下發至音箱A,音箱A將立體聲分離為左右聲道,音箱A自己播放左聲道音頻并將右聲道音頻流下發給音箱B,由B音箱播放右聲道,精準的同步技術保證音箱A和B同時播放立體聲的左右聲道音頻。全屋播放功能支持語音指令和app創建組網,音頻流下發至音箱C,音箱C將音頻流混合為單聲道信號并下發給組內其他的音箱設備同時播放,不區分聲道,可支持多個設備。

就近喚醒全面升級:實現跨設備關閉鬧鐘

早在2018年,小米音箱系列就上線了就近喚醒功能。值得一提的是,此次小米小愛音箱Art就近喚醒全新升級,可支持跨設備關閉鬧鐘。遠處的音箱鬧鐘響了,喚醒近處的音箱可以直接關閉遠處的鬧鐘。此功能在業內首 次上線,小米小愛音箱Art也是首 款支持該功能的產品

說到就近喚醒,小米早在2018年就上線這一功能,截止2020年4月28日,分布式就近喚醒已為多設備用戶累計避免約6.82億次設備同時喚醒,準確率達到98%。近期首 發上線了端云多維度結合的就近喚醒綜合決策策略,深入加強多設備狀態信息聯動,智能判決空間信息,進一步提升了家庭復雜網絡環境的兼容性,同時做到了多設備響應的唯一執行,大幅提升用戶體驗。

未來,小米將專注于家居復雜場景應用、智能聲學感知和多傳感融合。在復雜的家庭結構環境中,保證算法的可用性,讓每個設備主動感知所處的不同環境,根據環境完成算法自適應,將數據結果取長補短,相互融合,實現多維度智能感知。

兩麥陣列喚醒:兩麥盲源分離降噪前端,雙級喚醒策略支撐

小米小愛音箱Art同步支持兩麥陣列喚醒技術。在麥克風陣列方面,小米采用兩麥盲源分離降噪前端,通過盲源分離、降噪、回聲消除等技術,在多聲源的嘈雜環境、音箱自身播放音樂時,都能結合語音增強技術,消除噪音的強干擾,獲得干凈、準確的人聲音頻。

在喚醒方面,為了兼顧低功耗與高性能,自研語音喚醒算法采用雙級喚醒策略。低功耗待機喚醒詞檢測模型,利用子采樣與共享隱含層等技術,減少模型資源消耗的同時保證召回率在一個較高的水平。高性能誤喚醒檢測模型,采用粗粒度建模單元,結合局部信息與長時上下文信息,高效抑制誤喚醒。通過從海量數據中自動挖掘高區分度訓練樣本,再經過數據擴充技術,提高喚醒模型在低信噪比與小音量場景下的魯棒性。

小米AI實驗室語音產品負責人陳君宇表示,小米IoT平臺連接的智能硬件數已達到2.5億臺,音箱出貨量已經達到2200萬臺,在這么大的用戶體量下,如何讓基礎體驗持續提升,且提升產品在AI體驗上的創新性,對自研AI團隊來說是非常重要的使命。

小米一直致力于研發先進的AI技術,并將技術落地到產品及業務,為用戶帶來更好的產品體驗,讓全球每一個人都能享受科技帶來的美好生活。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • TTS
    TTS
    +關注

    關注

    0

    文章

    41

    瀏覽量

    10787
  • 小米
    +關注

    關注

    70

    文章

    14349

    瀏覽量

    144092
  • 小愛音箱
    +關注

    關注

    0

    文章

    26

    瀏覽量

    4121
收藏 人收藏

    評論

    相關推薦

    基于LSTM神經網絡的情感分析方法

    情感分析是自然語言處理(NLP)領域的一項重要任務,旨在識別和提取文本中的主觀信息,如情感傾向、情感強度等。隨著深度學習技術的發展,基于LSTM(長短期記憶)神經網絡的
    的頭像 發表于 11-13 10:15 ?475次閱讀

    語音提示器-WT3000A離在線TTS方案-打破語種限制/AI對話多功能支持

    TTS(Text To Speech )技術作為智能語音領域的重要組成部分,能夠將文本信息轉化為逼真的語音輸出,為各類硬件設備提供便捷的語音提示服務。本方案正是基于唯創知音的離在線TTS(離線本地音樂播放與在線
    的頭像 發表于 10-25 10:36 ?219次閱讀
    語音提示器-WT3000A離在線<b class='flag-5'>TTS</b>方案-打破語種限制/AI對話多功能<b class='flag-5'>支持</b>

    語音提示器-WT3000A離在線TTS方案-打破語種限制/AI對話多功能支持

    TTS(離線本地音樂播放與在線TTS合成播放結合)技術,旨在為用戶打造一個智能、高效、人性化的語音提示解決方案。方案介紹SchemeIntroduction核心技術
    的頭像 發表于 10-25 08:11 ?210次閱讀
    語音提示器-WT3000A離在線<b class='flag-5'>TTS</b>方案-打破語種限制/AI對話多功能<b class='flag-5'>支持</b>

    摘獲“新銳產品獎”,芯元智重磅亮相ICDIA-IC Show 2024

    “應用創新、打造新生態”為主題,以“AI應用需求及技術發展”為主線,圍繞AI大模型與芯片技術、RISC-V生態、通信與射頻技術、IC設計與創新中國芯等內容交流和研討。來自全國的集成電路企業、電子研發企業、系統方案商、整機供應鏈、
    的頭像 發表于 10-08 10:05 ?336次閱讀
    摘獲“新銳產品獎”,<b class='flag-5'>愛</b>芯元智<b class='flag-5'>重磅</b>亮相ICDIA-IC Show 2024

    打破技術壟斷,持續創新應用!回顧2024全國聲學大會Aigtek安泰電子高光時刻!

    大會將繼續推動“產、學、研、用”全領域的交流融合互動,審視時代的發展趨勢,拓展聲學領域的發展空間,宏觀論述技術趨勢,專題聚焦前沿技術,廣泛普及聲學知識,展示產業最
    的頭像 發表于 10-01 08:00 ?349次閱讀
    打破<b class='flag-5'>技術</b>壟斷,持續創新應用!回顧2024全國<b class='flag-5'>聲學</b>大會Aigtek安泰電子高光時刻!

    WT2605C TTS在線語音合成芯片:賦能多行業領域,引領產品智能化

    在當今科技日新月異的時代,語音技術正逐步滲透到我們生活的方方面面,而TTS(Text-To-Speech,文本到語音)技術作為其中的重要一環,更是以其獨特的魅力改變了人機交互的方式。WT2605C
    的頭像 發表于 09-12 15:54 ?300次閱讀
    WT2605C <b class='flag-5'>TTS</b>在線語音合成芯片:賦能多行業領域,引領產品智能化

    大族智能裝備助力瑪科技智造升級、打造綠色出行新時代

    ? 近日,大族激光智能裝備集團多臺高速激光切管機陸續交付瑪科技集團,助力瑪科技智造升級、打造綠色出行新時代。 智造升級 向綠而行 瑪科
    的頭像 發表于 07-10 16:20 ?540次閱讀

    使用google-translate和wwe合并后無法使用google-tts怎么解決?

    我打算使用lyrat-mini做一個使用喚醒詞喚醒然后后續通過google-sr和google-tts進行交流的聊天機器人,但是當我合并了adf的例子中的wwe和google-translate之后
    發表于 06-28 06:05

    求助,TTS能夠直接使用IO口輸出到PA嗎?

    TTS能夠直接使用IO口輸出到PA嗎?不經過I2C和I2S解碼芯片
    發表于 06-28 06:02

    聲學定義和音高單位

    學科,研究從微觀到宏觀、從次聲(長波)到超聲(短波)的一切形式的線性與非線性機械波現象。隨著19世紀無線電技術的發明和應用,聲學研究方向已出現很多分支:基礎聲學
    的頭像 發表于 06-22 08:30 ?645次閱讀
    <b class='flag-5'>聲學</b>定義和音高單位

    ESP-IDF是否支持基于BLE的OTA升級

    節點需要切換到WiFi才能完成HTTP升級,ESP-IDF是否支持基于BLE的OTA升級
    發表于 06-12 07:49

    Aigtek誠邀您蒞臨2024年聲學科學與技術高端論壇!

    6月14日-17日,2024年聲學科學與技術高端論壇將于廈門佰翔軟件園酒店召開,屆時Aigtek安泰電子將攜一眾明星產品及專業測試解決方案亮相本次論壇,我們誠邀您蒞臨Aigtek展位參觀、洽談與觀摩
    的頭像 發表于 06-04 08:01 ?301次閱讀
    Aigtek誠邀您蒞臨2024年<b class='flag-5'>聲學</b>科學與<b class='flag-5'>技術</b>高端論壇!

    可以當回音壁使用的藍牙條形音箱中應用的藍牙芯片

    條形音箱(英語:Soundbar)是一個有立體聲效的音箱,通常放置于屏幕的上方或下方,基于聲學的考慮,此種音箱多為長條形設計,故名。
    的頭像 發表于 05-15 09:41 ?626次閱讀
    可以當回音壁使用的藍牙條形<b class='flag-5'>音箱</b>中應用的藍牙芯片

    【解讀】VTX316 TTS語音合成芯片幾個很實用的應用技巧

    ? 前言 VTX316是北京宇音天下科技有限公司最新推出的一款更具性價比的中文TTS語音合成芯片,采用QFN32(4*4mm)封裝,體積更加精巧,文本合成一次高達500字節數據(250個漢字),支持
    的頭像 發表于 05-13 16:33 ?440次閱讀

    玩轉語音合成芯片(TTS芯片),看這一篇就夠了

    什么是語音合成芯片:語音合成芯片也稱為TTS芯片,即文字轉語音芯片,是一種能夠將輸入的文字信息轉換為語音輸出的芯片。通過TTS芯片,我們可以將文字信息轉化為自然語音,實現人機語音交互。
    的頭像 發表于 03-19 18:13 ?1395次閱讀
    玩轉語音合成芯片(<b class='flag-5'>TTS</b>芯片),看這一篇就夠了
    主站蜘蛛池模板: 超碰97av 在线人人操| 韩国伦理电影在线神马网| 日本美女论坛| 在线高清电影理论片4399| 国产亚洲精品线观看不卡| 亲嘴扒胸摸屁股视频免费网站| 中文字幕午夜福利片| 精品人妻一区二区三区视频53| 小莹的性荡生活40章| 国产AV一区二区三区传媒| 欧美一区二区激情视频| 亚洲一二三产品区别在哪里| 国产亚洲精品字幕在线观看| 午夜性色一区二区三区不卡视频| 成人特级毛片| 强奸日本美女小游戏| 99视频久久精品久久| 美女被打开了屁股进去的视频| 中文字幕一区二区三区在线观看| 久久精品免费电影| 中国成人在线视频| 麻豆国产人妻欲求不满| 91日本在线观看亚洲精品| 免费看国产精品麻豆| 99国内精品| 欧式午夜理伦三级在线观看| AV久久久囯产果冻传媒| 欧美性喷潮xxxx| 成人精品视频| 十九岁在线观看免费完整版电影| 国产对白精品刺激一区二区| 色欲档案之麻雀台上淫| 国产精品久久大陆| 亚洲黄色在线播放| 精品国产中文字幕在线视频| 亚洲免费无码中文在线| 久草视频在线观看免费4| 中文字幕绝色少妇性| 美美哒高清在线播放8| ava云直播| 深夜草逼逼|