色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

業務場景數據的采集和標注

深度學習自然語言處理 ? 來源:深度學習自然語言處理 ? 作者:深度學習自然語言 ? 2020-11-02 14:57 ? 次閱讀

無論是在傳統機器學習領域還是現今炙手可熱的深度學習領域,基于訓練樣本有明確標簽或結果的監督學習仍然是一種主要的模型訓練方式。尤其是深度學習領域,需要更多數據以提升模型效果。目前,已經有一些規模較大的公開數據集,如ImageNet,COCO等。對于深度學習入門者,這些公開數據集可以提供非常大的幫助;但是對于大部分企業開發者,特別在醫學成像自動駕駛工業質檢等領域中,他們更需要利用專業領域的實際業務數據定制AI模型應用,以保證其能夠更好地應用在業務中。因此,業務場景數據的采集和標注也是在實際AI模型開發過程中必不可少的重要環節。

數據標注的質量和規模通常是提升AI模型應用效果的重要因素,然而完全通過人力手動標注數據建立一個高質量、大規模專業領域數據集卻并不容易:標注人員的培訓與手工標注成本高、耗時長。為解決此問題,我們可以利用主動學習的方法,采用“Human-in-the-loop”的交互式框架(圖1)進行數據標注,以有效減少人工數據標注量。

圖1 基于主動學習的“Human-in-the-loop”交互式數據標注框架

主動學習(ActiveLearning, AL)是一種挑選具有高信息度數據的有效方式,它將數據標注過程呈現為學習算法和用戶之間的交互。其中,算法負責挑選對訓練AI模型價值更高的樣本,而用戶則標注那些挑選出來的樣本。如“Human-in-the-loop”交互式數據標注框架,通過用戶已標注的一部分數據來訓練AI模型,通過此模型來標注剩余數據,再從中篩選出AI模型標注較為困難的數據進行人工標注,再將這些數據用于模型的優化。幾輪過后,用于數據標注的AI模型將會具備較高的精度,更好地進行數據標注。以圖像分類問題舉例,首先,人工挑選并標注一部分圖像數據,訓練初始模型,然后利用訓練的模型預測其余未標注的數據,再通過“主動學習”中的“查詢方法”挑選出模型比較難分辨類別的數據,再人為修正這些“難”數據的標簽并加入訓練集中再次微調(Fine-tuning)訓練模型。“查詢方法”是主動學習的核心之一,最常見的“查詢方法”有基于不確定性的樣本查詢策略和基于多樣性的樣本查詢策略。

基于不確定性的樣本查詢策略可查詢出深度學習模型預測時,靠近決策邊界的樣本。以二分類問題舉例,當一個未標注樣本被預測為任一標簽的概率都是50%時,則該樣本對于預測模型而言是“不確定”的,極有可能被錯誤分類。要注意的是,主動學習是一個迭代過程,每次迭代,模型都會接收認為修正后的標注數據微調模型,通過這個過程直接改變模型決策的邊界,提高分類的正確率。

基于多樣性的查詢策略,可實現對當前深度學習模型下狀態未知樣本的查詢。將通過多樣性查詢挑選出的數據加入訓練集,可豐富訓練集的特征組合,提升模型的泛化能力。模型學習過的數據特征越豐富,泛化能力越強,預測模型適用的場景也越廣。

為解決大數據量標注的痛點,基于主動學習且融合多樣查詢策略的智能標注AI解決方案應運而生。通過EasyDL平臺使用智能標注后,開發者們只需標注數據集中30%左右的數據,即可啟動智能標注在EasyDL后臺自動標注剩余數據,再返回少量后臺難以確定的數據再次進行人工標注,同時提升自動標注的準確性,經過幾輪之后,在實際項目測試中,智能標注功能可以幫助用戶節省70%的數據標注量,極大地減少數據標注中的人力成本和時間成本。

EasyDL零門檻AI開發平臺,面向企業開發者提供智能標注、模型訓練、服務部署等全流程功能,針對AI模型開發過程中繁雜的工作,提供便捷高效的平臺化解決方案。目前,EasyDL的智能標注功能已支持計算機視覺CV方向的物體檢測模型、圖像分割、自然語言處理NLP方向的文本分類模型的數據標注。

智能標注解決了模型開發過程中龐大的數據準備難題,那么在模型訓練與部署階段,EasyDL是否還有其他“武功秘籍”幫助開發者高效開發?

本周六,AI快車道EasyDL零門檻模型訓練營來到六朝古都南京,依托槳聲燈影里的秦淮河,為這座歷史悠久的城市帶來AI科技的新氣息!

各行業如何做到技術與場景結合,高效用AI?

視覺模型背后的核心技術點如何理解?

從云到端,端側模型的技術原理與部署如何操作?

模型精度難以提升,有沒有關鍵效果提升技巧尚未掌握?

責任編輯:xj

原文標題:百度工程師帶來干貨分享,助你轉型AI應用工程師!

文章出處:【微信公眾號:深度學習自然語言處理】歡迎添加關注!文章轉載請注明出處。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 數據采集
    +關注

    關注

    39

    文章

    6131

    瀏覽量

    113709
  • AI
    AI
    +關注

    關注

    87

    文章

    30996

    瀏覽量

    269288
  • 機器學習
    +關注

    關注

    66

    文章

    8422

    瀏覽量

    132714
  • 深度學習
    +關注

    關注

    73

    文章

    5504

    瀏覽量

    121222

原文標題:百度工程師帶來干貨分享,助你轉型AI應用工程師!

文章出處:【微信號:zenRRan,微信公眾號:深度學習自然語言處理】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    AI自動圖像標注工具SpeedDP將是數據標注行業發展的重要引擎

    AI大浪潮下,許多企業都在不斷借助AI來提升自己的行業競爭力,數據標注企業也不例外,傳統人工標注效率不足的弊端困擾了多年,如今新的“引擎”就在眼前,他們當然不會放過這個機會。針對這樣的需求,慧視光電
    的頭像 發表于 01-02 17:53 ?90次閱讀
    AI自動圖像<b class='flag-5'>標注</b>工具SpeedDP將是<b class='flag-5'>數據</b><b class='flag-5'>標注</b>行業發展的重要引擎

    標貝數據標注在智能駕駛訓練中的落地案例

    標貝科技深耕AI數據服務多年,在無人駕駛、自動駕駛等智能駕駛領域擁有豐富的合作案例。多次采用點云標注以及3D&2D融合等標注方式為智能駕駛領域客戶提供環境感知、決策策劃、車道線標注、障
    的頭像 發表于 12-24 15:17 ?478次閱讀
    標貝<b class='flag-5'>數據</b><b class='flag-5'>標注</b>在智能駕駛訓練中的落地案例

    標貝數據標注案例分享:車載語音系統數據標注

    的作用。一般來說,車載語音識別系統主要分為前端和后端兩個部分,本文將針對前端語音信號數據采集標注進行實例講解。
    的頭像 發表于 12-24 14:24 ?134次閱讀
    標貝<b class='flag-5'>數據</b><b class='flag-5'>標注</b>案例分享:車載語音系統<b class='flag-5'>數據</b><b class='flag-5'>標注</b>

    標貝科技:自動駕駛中的數據標注類別分享

    的必要條件,數據采集數據標注服務已成為支撐自動駕駛熱潮必不可少的一環。本文將以數據標注的視角,通過標貝科技自研平臺標貝
    的頭像 發表于 11-22 15:07 ?909次閱讀
    標貝科技:自動駕駛中的<b class='flag-5'>數據</b><b class='flag-5'>標注</b>類別分享

    標貝科技:自動駕駛中的數據標注類別分享

    的必要條件,數據采集數據標注服務已成為支撐自動駕駛熱潮必不可少的一環。本文將以數據標注的視角,通過標貝科技自研平臺標貝
    的頭像 發表于 11-22 14:58 ?557次閱讀
    標貝科技:自動駕駛中的<b class='flag-5'>數據</b><b class='flag-5'>標注</b>類別分享

    HarmonyOS NEXT應用元服務開發按鈕標注場景

    對于用戶可點擊等操作的任何按鈕,如果不是文本類控件,則須通過給出標注信息,包括用戶自定義的控件中的虛擬按鈕區域,否則可能會導致屏幕朗讀用戶無法完成對應的功能。 此類控件在進行標注時,標注文本不要包含
    發表于 10-10 16:48

    opc數據采集平臺的應用場景

    OPC數據采集平臺廣泛應用于各種工業自動化和物聯網領域,以下是一些典型的應用場景: 1. 制造業:在制造業中,OPC數據采集平臺用于監控和控制生產線上的各種設備,采集設備狀態、生產進度
    的頭像 發表于 07-26 14:02 ?411次閱讀

    車載語音識別系統語音數據采集標注案例

    的作用。一般來說,車載語音識別系統主要分為前端和后端兩個部分,本文將針對前端語音信號數據采集標注進行實例講解。
    的頭像 發表于 06-19 15:52 ?366次閱讀
    車載語音識別系統語音<b class='flag-5'>數據采集</b><b class='flag-5'>標注</b>案例

    車載語音識別系統語音數據采集標注案例

    的作用。一般來說,車載語音識別系統主要分為前端和后端兩個部分,本文將針對前端語音信號數據采集標注進行實例講解。
    的頭像 發表于 06-19 15:49 ?519次閱讀

    物聯網數據采集系統的功能和應用場景

    物聯網數據采集系統是一種利用傳感器、無線通信技術和網絡技術,對物體的各種信息進行采集、處理和傳輸的系統。以下是物聯網數據采集系統的主要功能和應用場景: 功能: 1.
    的頭像 發表于 06-19 14:27 ?791次閱讀
    物聯網<b class='flag-5'>數據采集</b>系統的功能和應用<b class='flag-5'>場景</b>

    數據采集網關的功能和應用場景

    隨著信息技術的飛速發展,物聯網系統在各行業的應用越來越廣泛,數據采集網關作為物聯網系統中的重要組成部分,發揮著至關重要的作用。本文將詳細介紹數據采集網關的功能及應用場景,以便讀者更好地理解其在物聯網
    的頭像 發表于 06-13 15:22 ?808次閱讀
    <b class='flag-5'>數據采集</b>網關的功能和應用<b class='flag-5'>場景</b>

    標貝數據采集標注在自動駕駛場景中落地應用實例

    高質量AI數據做支撐。標貝科技深耕AI數據服務領域多年,在自動駕駛數據采集標注領域中有著多個成功案例,在自動駕駛場景中,
    的頭像 發表于 05-28 14:22 ?606次閱讀
    標貝<b class='flag-5'>數據采集</b><b class='flag-5'>標注</b>在自動駕駛<b class='flag-5'>場景</b>中落地應用實例

    工業數據采集網關的功能、特點、應用場景及其實操性

    隨著工業4.0和物聯網(IoT)技術的深入發展,工業數據采集網關作為連接現場設備與上層管理系統的關鍵節點,其在智能工廠中的作用愈發凸顯。本文將深入探討工業數據采集網關的功能、特點、應用場景及其實操性
    的頭像 發表于 05-15 15:35 ?902次閱讀
    工業<b class='flag-5'>數據采集</b>網關的功能、特點、應用<b class='flag-5'>場景</b>及其實操性

    數據采集邊緣網關解決企業數據采集痛點的關鍵

    網關 應運而生,成為解決企業數據采集痛點的關鍵所在。 一、企業背景與痛點分析 在當前信息化、智能化的時代背景下,許多企業面臨著海量數據采集和處理的難題。這些企業通常擁有多個分散的業務場景
    的頭像 發表于 04-07 13:56 ?390次閱讀

    車間數據采集網關的工作原理和應用場景

    在智能制造日益盛行的今天,車間數據采集作為整個生產流程中的關鍵環節,其重要性愈發凸顯。數據采集網關作為這一環節的核心設備,扮演著承上啟下的重要角色。本文旨在深入探討車間數據采集網關的工作原理和應用
    的頭像 發表于 03-06 14:42 ?525次閱讀
    車間<b class='flag-5'>數據采集</b>網關的工作原理和應用<b class='flag-5'>場景</b>
    主站蜘蛛池模板: 欧美成人一区二免费视频| 久久久久99精品成人片三人毛片| 日本熟妇乱妇熟色在线电影| 亚洲人成77777在线视频| 高清午夜福利电影在线| 人人做人人干| 被滋润的艳妇疯狂呻吟白洁老七| 久久亚洲高清观看| 在线视频免费观看| 久久全国免费观看视频| 真人做受120分钟免费看 | 亚洲成色WWW久久网站夜月| 国产成人永久免费视频| 肉耽高h一受n攻| 一个人看的www视频动漫版| 国产偷国产偷亚洲高清SWAG| 午夜视频无码国产在线观看| 国产精品亚洲AV色欲在线观看| 午夜福利92看看电影80| 国产亚洲精品线视频在线| 亚洲精品中文字幕制| wwwzzz日本| 青青草原国产在线| 菲律宾毛片| 午夜伦伦电影理论片费看| 国产又粗又猛又爽又黄的免费视频| 亚洲AV永久无码精品老司机蜜桃| 国产一区二区三区四区五在线观看| 亚洲欧洲免费三级网站| 巨胸美女狂喷奶水www网麻豆| 1V1各种PLAY女主被肉| 国精产品一区一区三区M| 亚洲欧美综合在线中文| 榴莲推广APP网站入口官网| 亚洲日韩中文字幕日本有码| 九九热视频免费| 99精彩免费观看| 天天干夜夜叭| 久久国产精品高清一区二区三区 | 亚洲AV无码乱码A片无码蜜桃| 精品视频久久久久|