色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

聯邦學習如何以野馬之姿,打破 AI 數據困局

454398 ? 來源:雪球 ? 作者:腦極體 ? 2021-03-04 16:43 ? 次閱讀

關注 AI 技術的人們想必都知道,聯邦學習(Federated Learning)技術最早是由谷歌在 2017 年公開發布,一經提出就被業內寄予厚望。

由于面臨著數據孤島和數據隱私保護等問題,AI 產業落地進程面臨著嚴重的數據困局。聯邦學習技術正是為了應對這一問題而被提出,現在已成為新一代人工智能最重要的技術范式之一。

在聯邦學習出現并快速發展的三年多時間里,國內外諸多科技巨頭都已經開展聯邦學習的深入研究與應用。值得注意的是,在聯邦學習技術的研究和推廣上,我國的科技企業與研究機構不再是處于跟隨狀態,而是處于和國外科技巨頭并駕齊驅的水平。其中一些頭部企業正在積極參與到聯邦學習的技術標準制定,以及產業應用落地的實踐當中。

聯邦學習為何如此重要?在最近兩年當中,聯邦學習又是如何在眾多國內科技巨頭的支持和推動下,實現迅速發展和應用落地的?這成為很多人非常關心的問題。

打破 AI 數據困局,聯邦學習的野馬之姿

聯邦學習,谷歌這一技術設想,主要回應的問題是如何有效利用用戶終端上的數據進行 AI 模型訓練,而又不侵犯用戶的數據隱私。

工程師們的解決方式是用戶數據只需在本地終端進行訓練,云端服務器只要獲取訓練后的訓練模型(權重)即可,也就是搭建一個大型的分布式神經網絡模型訓練框架,從而讓用戶數據不離本地,同時也能獲得很好的 AI 服務體驗。

聯邦學習的出現,讓每個用戶都可能成為 AI 發展的貢獻者,同時又啟發了企業之間跨越 AI 落地的數據鴻溝的一種嶄新方式。

所謂的“數據鴻溝”,主要是我們常聽到的“數據孤島”。一方面是企業逐利的本性,必然使其不愿拿出自身的數據與其他公司交換,導致少數幾家巨頭壟斷大量數據而小企業無數據可用的馬太效應;另一方面是全球各國對數據隱私保護的監管越發嚴格,企業在用戶數據使用和共享上面更要考慮合規合法的應用,因而進一步加劇了數據孤島效應。

在這一數據鴻溝的制約下,眾多行業和企業會因為沒有高質量、大規模的數據支撐而無法得到更好的訓練模型。特別是對于一些專業性強的細分領域,如金融、風控、法律以及醫療等領域,由于各家的數據無法打通,自身的數據量又有限,會極大地限制其 AI 技術的發展。

既能保護數據不共享以保護用戶隱私,同時又能在云端更新和共享通用模型,這正是聯邦學習技術所能實現“兩全其美”的策略。

聯邦學習在從 C 端應用向 B 端產業應用演進中,形成了更為通用的解決方案:一、橫向聯邦學習,即樣本中用戶不同,特征相同,谷歌的方法即是這種;二、縱向聯邦學習,即樣本中用戶相同,特征不同,適用于擁有同一批用戶的不同企業;三、遷移聯邦學習,即樣本中用戶、特征都可能不同,這樣可以通過數據的升維或降維,從而進行另外數據子空間的遷移學習。

這樣,聯邦學習作為一種更加泛化的機器學習方式,就可以把更多像金融、保險、醫療、安防、教育等行業機構作為數據主體來進行 AI 的模型應用場景了。而在聯邦學習技術的深化和擴展當中,我國的多家科技企業發揮了重要的作用。

百舸爭流,聯邦學習在中國的成績單

作為聯邦學習技術的深度參與方,國內企業不僅參與了聯邦學習的技術研發和應用,同樣還參與了聯邦學習的標準制定以及貢獻了多個開源模型框架。

首先,我國的多家企業組織和參與了聯邦學習基礎架構與應用規范標準的制定。去年,聯邦學習基礎架構與應用(IEEE P3652.1)標準工作組兩次會議先后在深圳、洛杉磯召開,國內眾多企業對聯邦學習標準草案的制定提出建設性意見,并預計在今年出臺這一草案。

業內人士評價,聯邦學習技術正是在全球知名人工智能專家楊強教授和其團隊主導參與的 IEEE 聯邦學習標準制定委員會的推動下,才成為備受產學研各界關注的人工智能的研究領域。

其次,國內多家企業也都紛紛推出了可以進行產業落地應用的開源框架。

比如,騰訊發起的微眾銀行早在 2018 年就基于聯邦學習理論研究進行相關開源軟件研發,在 2019 年初,正式開源全球首個工業級聯邦學習框架 FATE(Federated Learning Enabler),其實現了基于同態加密和多方計算的安全計算協議,在信貸風控、客戶權益定價、監管科技等領域推出了相應的商用方案。

去年,百度在 PaddlePaddle 2.0 開放平臺中,也增加了 PaddleFL 聯合學習框架,PaddleFL 主要是面向深度學習進行設計,提供了眾多在計算機視覺、自然語言處理、推薦算法等領域的聯邦學習策略及應用場景。同樣,平安科技在其提出的聯邦智能體系的基礎上,自主研發了蜂巢聯邦學習平臺,主要應用于多方信息的安全協作計算,滿足銀行和金融機構的風險評估、反洗錢、投顧、投研、信貸、保險和監管等多場景應用需求。

同樣,基于聯邦學習理論的多方安全計算技術,騰訊云開發出“騰訊云數盾”來滿足數據安全治理的多重需求。阿里巴巴也早在 2015 年就開始了與聯邦學習思路相同的共享學習技術的研究,在各方通過共享加密數據或加密機制下的參數交換方式來進行機器學習,建立虛擬的共享模型的產品平臺。

此外,華為、京東、聯想以及國內多家創業企業都已在聯邦學習的生態發展中貢獻進行著各種不同細分領域的實踐創新。

這些國內科技企業之所以紛紛投入到聯邦學習技術的研發和推廣,正是看到其在用戶數據隱私保護與 AI 技術創新上面實現的完美平衡,以及帶來的眾多產業的 AI 應用落地的機會。

推動 AI 產業落地,聯邦學習的中國實踐

根據聯邦學習的技術特點以及參與企業的當前的研發重點,金融領域成為聯邦學習最先進行應用落地的主要場景。其中在金融業務的眾多環節中,信貸風控可謂是典型的聯邦學習的應用落地場景。

基于聯邦學習的信貸風控,微眾銀行提出了“同態加密中間變量”的解決方案,也就是保證原始數據不出庫的情況下,使用經過梯度交換得到的中間變量來進行風控模型的建模,從而降低使用中心化機器學習帶來的系統性隱私風險。

通過聯邦學習實現的信貸風控的用戶數據網絡增強,就可以在貸款前更好地判斷客戶風險,幫助信貸公司過濾信貸黑名單或明顯沒有轉化的貸款客戶,進一步降低貸款審批流程后期的信審成本;同時在貸款中實現用戶放款后行為的動態評估以輔助授信額度的調整,在貸款后期幫助放貸機構進行催收的策略評估,調整催收策略,提升催收效率。

在醫療健康行業,同樣也長期面臨著“數據孤島”的問題,從而制約著醫療 AI 的發展。

基于患者數據隱私保護的要求和各家醫療機構數據無法互聯互通且標準不一的問題,聯邦學習可以很好地避開醫療機構之間的信息壁壘,不再需要將各家數據做集中合并,而是通過協議在其間傳遞加密之后的信息,而各個醫療機構通過使用這些加密的信息更新模型參數,從而實現在不暴露原始數據的條件下使用全部患者數據的訓練過程。

日前,騰訊的天衍實驗室和微眾銀行正是利用這一聯邦學習的方式成功構建了一個“腦卒中發病風險預測模型”,既能利用兩家醫院的加密后的共同的患者樣本進行特征建模訓練,又能很好地保護各自的數據隱私,最終比兩家醫院各自獨立訓練的模型效果準確率有了大幅的提升。

在安防監控行業,AI 安防系統也同樣由于數據隱私保護的監管要求和各家安防廠商之間各自為戰的狀況而難以獲得很好的發展。假如有多個廠商使用聯邦學習來訓練和優化 AI 算法模型,就可以讓每家企業在自己的服務器上進行訓練,只需加密上傳訓練模型到后臺,進行模型優化后,再反饋給各個廠商改進后的模型方案。

除了金融、醫療和安防行業的應用外,聯邦學習正在深入到其他行業當中。未來包括像金融、醫療、保險、安防、教育、零售、工業以及智慧城市等各個行業和場景,都可以依賴聯邦學習技術實現行業 AI 能力的提升,從而實現降本增效的運營目標。

總體而言,對于國內這些聯邦學習的積極推動者和踐行者的科技企業們而言,聯邦學習到底意味著什么?

首先,去年 5 月我國網信辦出臺了《數據安全管理辦法(征求意見稿)》這一被稱為“中國版 GDPR”的法規,標志著我國數據規范使用的時代已經到來。面對越來越嚴格的數據安全的監管要求以及日益嚴峻的用戶數據隱私保護的風險,國內這些科技企業必須將數據的合規合法的使用當作日常運營的關鍵要務來看待。

數據安全的嚴格限制無疑會帶來企業在 AI 技術應用上面的挑戰,聯邦學習技術正是應對這一監管挑戰和行業競爭限制而提出的解決方案,自然得到了科技企業的大力推崇。

其次,對于那些科技巨頭而言,聯邦學習技術不僅能直接解決企業內部的“數據孤島”問題,也可以使其在所要涉及的行業內建立起數據共享的合作生態。只有搶占先機,推出自己的聯邦學習的開源架構,才能吸引更多的行業伙伴加入到這一聯邦學習的生態當中。

另外,對于那些創業企業或行業客戶而言,既沒有豐富的數據資源,也沒有充足的資源投入到 AI 系統的建設上,通過加入聯邦學習的生態,借助巨頭的平臺和大數據資源,進行自身 AI 模型的優化,大幅降低企業智能化升級成本,成為一件非常劃算和可行的選擇。

近兩年,我們經常會聽到“普惠 AI”這一概念。普惠 AI 的愿景肯定不會只是一兩家 AI 巨頭就能實現的,而是更需要各行各業的企業、組織和個人一同參與,來為 AI 的技術升級與落地貢獻源源不斷的數據資源。

在 AI 的持續演進和數據隱私安全保護的交織下,聯邦學習正在搭建一座機構與用戶、機構與機構之間數據信任、共享普惠 AI 成果的橋梁。而這座聯邦學習生態之橋的建設,國內的技術建造者和各行業的參與者還有很多的工作要做。

編輯:hfy

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • AI
    AI
    +關注

    關注

    87

    文章

    31490

    瀏覽量

    269918
收藏 人收藏

    評論

    相關推薦

    基于Python的GUI界面設計的AI學習

    PythonGUI:基于Python的GUI界面設計的一套AI課程學習(機器學習、深度學習、大數據
    發表于 12-28 10:08

    請問怎么解決EMC封裝的成本困局

    請問怎么解決EMC封裝的成本困局
    發表于 06-02 07:07

    STM32編譯開發環境及仿真調試篇-----野馬學習筆記

    STM32編譯開發環境及仿真調試篇-----野馬學習筆記
    發表于 10-27 09:13 ?26次下載
    STM32編譯開發環境及仿真調試篇-----<b class='flag-5'>野馬</b><b class='flag-5'>學習</b>筆記

    數據隱私保護下,AI數據應如何發展?

    隨著國際國內數據隱私保護成為新趨勢,數據共享變得更加困難,如何在保護數據隱私前提下開展AI數據研究?“
    發表于 03-26 09:10 ?2400次閱讀

    聯邦學習的最新發展及應用

    “同態加密”的突破使聯邦學習成為解決“隱私保護+小數據”雙重挑戰的利器。
    的頭像 發表于 07-19 15:16 ?2w次閱讀

    聯邦學習”或將推動AI在醫療行業加速落地?

    只有獲取更多的數據進行訓練,AI模型才能更強健,而數據現狀顯然有礙于深度學習理論下AI模型的進展。“聯邦
    的頭像 發表于 10-21 09:37 ?7068次閱讀

    聯邦學習已在國內外屢獲殊榮,多次贏得重要獎項

    值得關注的是,此次聯邦學習相關技術獲獎并不是首次在國際上獲得肯定,在AI技術激烈角逐的賽場上,聯邦學習已在國內外屢獲殊榮,多次贏得重要獎項。
    的頭像 發表于 02-17 07:49 ?3587次閱讀

    打破芯片技術封鎖困局,人才培養有望徹底改變我國芯片產業落后現狀

    打破芯片產業技術封鎖困局,人才培養是個行之有效的方法,而芯片人才培養的重要思路,就是與產業緊密結合。
    的頭像 發表于 10-20 16:13 ?3155次閱讀

    面向聯邦學習的分布式與隱私安全性綜述

    聯邦茡習是一種保證數據隱私安全的分布式機器學習方案。與傳統的機器學習的可解釋性問題類似,如何對聯邦學習
    發表于 04-29 11:13 ?3次下載
    面向<b class='flag-5'>聯邦</b><b class='flag-5'>學習</b>的分布式與隱私安全性綜述

    聯邦學習:舉眾人之力開發AI

    近日發表在《自然醫學》上的研究結果表明,聯邦學習能夠建立強大的AI模型并在不同的醫療機構中進行推廣。這一發現展示了AI在能源、金融服務、制造業等領域進一步應用的前景。 由新冠疫情引發的
    的頭像 發表于 10-09 14:51 ?1608次閱讀

    利用FLARE進行聯邦學習:NVIDIA 將協作式AI帶入醫療健康及其他領域

    提供 NVIDIA FLARE 的源代碼可為科研人員和平臺開發者帶來更多工具來定制其聯邦學習解決方案,從而更好地推動在各行各業中應用先進的 AI 技術。
    發表于 11-30 15:13 ?1575次閱讀
    利用FLARE進行<b class='flag-5'>聯邦</b><b class='flag-5'>學習</b>:NVIDIA 將協作式<b class='flag-5'>AI</b>帶入醫療健康及其他領域

    達摩院發布開源新型聯邦學習框架FederatedScope

    5月5日,達摩院發布并開源新型聯邦學習框架FederatedScope,該框架支持大規模、高效率的聯邦學習異步訓練,能兼容不同設備運行環境,且提供豐富功能模塊,大幅降低了隱私保護計算技
    的頭像 發表于 05-05 15:22 ?1403次閱讀

    一文詳解百度、谷歌、京東、騰訊在分布式網絡訓練下的聯邦學習解決方案

    的解決方案:安全聯邦學習。其中包括橫向聯邦學習、縱向聯邦學習
    的頭像 發表于 10-13 14:19 ?3913次閱讀
    一文詳解百度、谷歌、京東、騰訊在分布式網絡訓練下的<b class='flag-5'>聯邦</b><b class='flag-5'>學習</b>解決方案

    GNN與聯邦學習的強強組合又會擦出怎樣的火花?

    聯邦學習和 GNN 都是當前 AI 領域的研究熱點。聯邦學習的多個參與方可以在不泄露原始數據的情
    的頭像 發表于 02-17 10:00 ?906次閱讀

    聯邦學習在邊緣計算中的應用

    什么是聯邦學習? ? 聯邦學習(Federated Learning)是一種分布式機器學習技術? ? ?,其核心思想是通過在多個擁有本地
    發表于 05-18 15:52 ?0次下載
    <b class='flag-5'>聯邦</b><b class='flag-5'>學習</b>在邊緣計算中的應用
    主站蜘蛛池模板: 在线 亚洲 日韩 欧洲视频 | 手机在线免费观看毛片 | 内射后入在线观看一区 | 免费色片播放器 | 在线欧美 精品 第1页 | 日本浴室日产在线系列 | 暖暖视频免费高清在线观看 视频 | 吃胸亲吻吃奶摸下面免费视频 | 日韩人妻精品久久日 | 99视频国产热精品视频 | 牛牛在线精品视频 | 亚洲日本va中文字幕久久 | 久久人妻熟女中文字幕AV蜜芽 | 最近中文字幕MV免费高清在线 | 国产成人综合在线观看网站 | 免费国产成人手机在线观看 | 免费精品国偷自产在线在线 | 99精品视频在线观看 | 91福利国产在线观看网站 | 日本阿v在线资源无码免费 日本阿v片在线播放免费 | 国产在线精品亚洲 | 无码AV免费精品一区二区三区 | 久久99精品久久久久久园产越南 | 草莓视频在线观看完整高清免费 | 99久久精品免费看国产免费 | 沦为公交两奶头春药高潮迭起 | RAPPER性骚扰大开黄腔 | 啪啪羞羞GIF男女0OXX动态图 | 精品AV无码一二三区视频 | 青青青青草 | 差差差差差差差差免费观看 | 人妻夜夜爽天天爽三区麻豆AV网站 | 精品无码国产污污污免费网站2 | 国产午夜亚洲精品一区 | 回复术士人生重启在线观看 | 二级毛片在线观看 | 在线精品国精品国产不卡 | 在线看片成人免费视频 | 性欧美video另类hd高清 | 伦理片天堂eeuss影院 | 免费精品美女久久久久久久久 |