色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
电子发烧友
开通电子发烧友VIP会员 尊享10大特权
海量资料免费下载
精品直播免费看
优质内容免费畅学
课程9折专享价
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

基于覆蓋分數的采樣方法用于視覺定位問題

3D視覺工坊 ? 來源:計算機視覺工坊 ? 2023-01-04 10:09 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

論文探討了將連續學習用在視覺定位問題中,從而以增量方式在場景中訓練模型。一般的將深度學習方法與視覺定位相結合,比如利用深度神經網絡從輸入圖像直接回歸相機姿態或者3D場景坐標,這些方法都假設在訓練期間可以獲得所有場景的靜態數據分布,因為如果使用非平穩數據在視覺定位的深度網絡中會導致災難性遺忘,為了解決這個問題,論文提出了一種基于從固定緩沖區存儲和回放圖像的強基線,此外提出了一種新的基于覆蓋分數的采樣方法(Buff-CS),該方法將緩沖過程中的現有采樣策略用于視覺定位問題,實驗結果表明,在具有挑戰性的數據集(7Scenes、12 Scenes、19 Scenes)上,通過結合前一場景,標準緩沖方法得到了改進。

為什么使用連續學習,它與一般的深度學習聯合訓練所有場景數據有何不同?連續學習是不斷從傳入的數據流中學習,在這種設置下,所有場景是依次遇到的,如圖1所示。

cd272b38-88d5-11ed-bfe3-dac502259ad0.png

與對所有任務進行聯合訓練相比,以連續方式學習任務在樣本和記憶效率方面有幾個好處: 1)在聯合訓練環境中,每次場景發生變化時模型都需要在數據庫中的所有場景上進行重新訓練,即使是沒有發生任何變化的場景。向數據庫中添加新場景還需要模型重新訓練,這會影響可伸縮性,需要將完整的數據集存儲在內存中。 2)連續學習旨在通過僅在改變或新場景和存儲在小緩沖區中的先前場景的圖像上微調模型來降低計算成本,由于僅需要將當前場景的數據與來自先前場景的圖像的小緩沖區一起存儲在存儲器中,因此也降低了存儲器成本。這對于存儲容量受設備限制的移動應用程序更友好。Contributions:1)介紹了視覺定位背景下的連續學習問題。 2)在多個室內數據集上,利用現有的基于緩沖方法創建了一個經驗回放基線。 3)根據場景的3D幾何結構提出一種新的緩沖策略.連續學習:

cd438904-88d5-11ed-bfe3-dac502259ad0.png

Buffering:為了防止在訓練時發生災難性遺忘,少量先前的數據存儲在固定大小為B的緩沖區中。當前任務或類的輸入圖像和相應的標簽存儲在緩沖區中,將這個在緩沖區中存儲圖像的過程稱為Img-buff,除了圖像之外還存儲了提供更好的流形結構的中間表示,例如存儲預softmax層邏輯提供了類概率的分布,該類概率對類間語義關系進行編碼。緩沖區存儲中間表示為Rep-buff。Replay:回放是在學習當前任務的同時對緩沖區中存儲的過去場景的樣本進行重新迭代的過程。當前任務樣本和緩沖區B中的任務樣本的最終損失計算如下:

cd5aac42-88d5-11ed-bfe3-dac502259ad0.png

存儲在B中的中間表示可以通過知識蒸餾的過程用作偽標簽。例如來自當前網絡狀態的邏輯被約束為與存儲在緩沖存儲器B中的相應邏輯相似

cd74a9ee-88d5-11ed-bfe3-dac502259ad0.png

緩沖算法:緩沖算法決定當前任務中的哪些樣本將被存儲以供將來回放以及緩沖區中存儲的哪些樣本要被替換,算法有兩個階段,第一階段包括填充緩沖區,直到其充滿,然后第二階段決定額外傳入實例的緩沖概率。將連續學習用在視覺定位:本文基于之前提出的一種基于學習的方法,HSC-Net,其在一組參數化的分層網絡層中保持場景的隱式表示,這些分層網絡層預測每個2D像素位置的3D場景坐標,然后使用PnP,2D-3D對應關系用于獲得最終查詢相機姿態估計。在連續學習設置中,場景按順序呈現,對于Img buff,僅將輸入圖像和相應的3D場景坐標y存儲在B中,此外Rep buff存儲了中間聚類級別預測(此為HSCNet中的東西),與分類問題不同,視覺定位在場景或類上是多樣的,并且是獨立的,在特定子場景的圖像上學習定位不會使場景的其他部分通用化,為了在給定場景的所有子場景上保持定位性能,緩沖區需要保持最大化場景覆蓋率的圖像,此論文提出了一種方法去采樣圖像從而提供更好的場景覆蓋率,稱為Buff-CS,即如果與緩沖圖像觀察到的實例相比,傳入的新實例提供了新的場景觀察,則將緩沖概率增加到1,

cd85120c-88d5-11ed-bfe3-dac502259ad0.png

實驗:數據集為7Scenes、12Scenes,為了以順序的方式評估連續學習方法,論文將單獨的七個場景和十二個場景集成到單個坐標系。 采用了兩種緩沖方法作為基線,即Reservoir和Class-balance。Reservoir旨在從未知大小的輸入流中采樣k個數據實例,其中k是預定義的樣本大小,這種方法保證了單個幀被選擇到緩沖區的概率相同。Class-balance旨在進一步解決在連續學習中的類不平衡問題。此方法使類盡可能保持平衡,同時保留每個類/場景的分布。 在視覺定位的連續學習任務中,單個場景以增量方式被饋送到訓練網絡,也就是說第一場景中的數據被訓練以估計場景坐標,然后訓練權重被用作第二場景的初始化,為了在連續學習設置中訓練HSCNet,在相應場景的訓練完成后,對每個場景的訓練數據進行采樣并存儲在緩沖器中,如前所述,僅緩沖輸入圖像和相應標簽被稱為Img-buff,另外緩沖中間表示被稱為Rep-buff,對于Img-buff將RGB圖像、深度圖和地面真實姿態存儲到緩沖區。對于Rep-buff還存儲了預softmax層邏輯和預測的場景坐標。 表1報告了訓練完成后在所有場景上平均的姿勢準確度和覆蓋得分方面的表現

cd9fb6d4-88d5-11ed-bfe3-dac502259ad0.png

cdc33406-88d5-11ed-bfe3-dac502259ad0.png

表3中的平均精度評估了三種方法在完成新任務后對先前任務的性能。表3顯示了平均精度

cddec7b6-88d5-11ed-bfe3-dac502259ad0.png

總結:在多個室內定位數據集上對所提出的方法進行了評估,這些數據集在不同設置下相對于基線表現出更好的或有競爭力的性能。 論文實驗部分可以說是論文的亮點,有時間還是去讀一下論文實驗部分,其有更好的分析。

審核八年級:郭婷

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 神經網絡
    +關注

    關注

    42

    文章

    4814

    瀏覽量

    103813
  • 深度學習
    +關注

    關注

    73

    文章

    5562

    瀏覽量

    122851

原文標題:把連續學習的思路用在基于圖像的相機定位問題中( ICCV 2021)

文章出處:【微信號:3D視覺工坊,微信公眾號:3D視覺工坊】歡迎添加關注!文章轉載請注明出處。

收藏 0人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    用于白光 LED 應用的高效 1.5x 分數電荷泵 skyworksinc

    電子發燒友網為你提供()用于白光 LED 應用的高效 1.5x 分數電荷泵相關產品參數、數據手冊,更有用于白光 LED 應用的高效 1.5x 分數電荷泵的引腳圖、接線圖、封裝手冊、中文
    發表于 07-25 18:32
    <b class='flag-5'>用于</b>白光 LED 應用的高效 1.5x <b class='flag-5'>分數</b>電荷泵 skyworksinc

    采樣電阻的特點與應用解析

    一、采樣電阻的核心定義與功能定位 采樣電阻,又稱電流檢測電阻,是一種專門用于將電流信號轉化為電壓信號的精密電子元件。當電流通過電阻時,會在電阻兩端產生與電流成正比的電壓降,通過對該電壓
    的頭像 發表于 05-25 15:07 ?310次閱讀

    UWB 單基站二維定位:400 米廣域覆蓋的革新性方案

    環境的定位服務。本文將詳細介紹一款全新的、基于?PDOA(到達相位差)算法的?UWB?平面定位方案,它具備單基站定位、廣覆蓋和強大數據透傳能力等顯著優勢,廣泛適
    的頭像 發表于 05-16 13:07 ?280次閱讀
    UWB 單基站二維<b class='flag-5'>定位</b>:400 米廣域<b class='flag-5'>覆蓋</b>的革新性方案

    精準對接:焊接機器人視覺定位系統如何革新制造工藝

    隨著制造業的自動化水平不斷提高,焊接工藝也在向更高效、更精確的方向發展。尤其是在自動化焊接領域,視覺定位系統的引入為焊接機器人提供了前所未有的精度和靈活性。今天一起了解焊接機器人視覺定位
    的頭像 發表于 01-17 14:36 ?504次閱讀

    視覺定位在焊接機器人中的作用

    隨著制造業對精度、效率和自動化程度的要求不斷提高,焊接機器人在現代工業生產中扮演著越來越重要的角色,廣泛應用于汽車制造、工程機械、家電等多個行業。而視覺定位技術作為焊接機器人不可或缺的關鍵組成部分
    的頭像 發表于 01-06 16:05 ?472次閱讀
    <b class='flag-5'>視覺</b><b class='flag-5'>定位</b>在焊接機器人中的作用

    用于任意排列多相機的通用視覺里程計系統

    如何讓多相機視覺SLAM系統更易于部署且對環境更具魯棒性?本文提出了一種適用于任意排列多相機的通用視覺里程計系統。在KITTI-360和MultiCamData數據集上驗證了該方法對于
    的頭像 發表于 12-13 11:22 ?792次閱讀
    <b class='flag-5'>用于</b>任意排列多相機的通用<b class='flag-5'>視覺</b>里程計系統

    激光錫焊視覺定位技術的應用場景

    本文主要介紹視覺定位概念、一種基于視覺定位的激光焊接系統的結構和組成,及該焊接系統在某些特定場景的具體應用。
    的頭像 發表于 12-13 09:10 ?471次閱讀
    激光錫焊<b class='flag-5'>視覺</b><b class='flag-5'>定位</b>技術的應用場景

    用于機器視覺應用的智能機器視覺控制平臺

    看51camera的合作伙伴Neousys宸曜科技的Nuvis系列工控機。Nuvis系列機器視覺控制平臺是適用于現如今機器視覺市場的高整合機器視覺解決方案。Nuvis系列
    的頭像 發表于 11-23 01:08 ?570次閱讀
    適<b class='flag-5'>用于</b>機器<b class='flag-5'>視覺</b>應用的智能機器<b class='flag-5'>視覺</b>控制平臺

    閃電定位儀的日常維護方法簡介

    閃電定位儀的日常維護方法簡介
    發表于 11-13 16:32 ?0次下載

    機器視覺要面臨的挑戰及其解決方法

    機器視覺是指使用計算機和圖像處理技術從圖像中提取信息,并將其轉換為機器可理解的格式。這種方法已經被廣泛應用于自動化生產、質量控制、測量和檢測等領域。然而,機器視覺仍然面臨著一些挑戰,需
    的頭像 發表于 11-11 01:03 ?1025次閱讀

    SegVG視覺定位方法的各個組件

    視覺定位(Visual Grounding)旨在基于自由形式的自然語言文本表達定位圖像中的目標物體。隨著多模態推理系 統的普及,如視覺問答和圖像描述,
    的頭像 發表于 10-28 13:59 ?961次閱讀
    SegVG<b class='flag-5'>視覺</b><b class='flag-5'>定位</b><b class='flag-5'>方法</b>的各個組件

    一種將NeRFs應用于視覺定位任務的新方法

    視覺定位旨在估計在已知環境中捕獲的給定圖像的旋轉和位置,大致可以分為絕對姿態回歸(APR),場景坐標回歸(SCR)和分層方法(HM)。
    的頭像 發表于 10-28 10:03 ?594次閱讀
    一種將NeRFs應<b class='flag-5'>用于</b><b class='flag-5'>視覺</b><b class='flag-5'>定位</b>任務的新<b class='flag-5'>方法</b>

    用于AIC111的高效重采樣濾波器

    電子發燒友網站提供《用于AIC111的高效重采樣濾波器.pdf》資料免費下載
    發表于 10-23 10:13 ?0次下載
    <b class='flag-5'>用于</b>AIC111的高效重<b class='flag-5'>采樣</b>濾波器

    一種半動態環境中的定位方法

    在非靜態環境中進行地圖繪制和定位是機器人學的基本問題。之前的方法大多關注靜態和高度動態的物體,但在半動態環境中,如果不考慮低動態物體(如停放的汽車和行人),可能會導致定位失敗。我們提出了語義建圖
    的頭像 發表于 09-30 14:40 ?597次閱讀
    一種半動態環境中的<b class='flag-5'>定位</b><b class='flag-5'>方法</b>

    TDA4VM的有效視覺定位

    電子發燒友網站提供《TDA4VM的有效視覺定位.pdf》資料免費下載
    發表于 09-24 11:38 ?1次下載
    TDA4VM的有效<b class='flag-5'>視覺</b><b class='flag-5'>定位</b>
    主站蜘蛛池模板: 夜色55夜色66亚洲精品网站 | 蜜桃日本免费观看MV | 天天躁夜夜踩很很踩2022 | 国产亚洲精品久久久久久白晶晶 | 国产午夜伦伦伦午夜伦 | 湖南张丽大战黑人hd视频 | 一个人免费完整在线观看影院 | 日韩精品卡1卡2三卡四卡乱码 | 超碰99热在线精品视频 | 久久青草免费91线频观看站街 | 久久不射视频 | 亚洲欧美自拍清纯中文字幕 | 免费观看视频成人国产 | 青青在线视版在线播放 | 坠落的丝袜美人妻 | 羞羞影院午夜男女爽爽免费 | 精品欧美18videosex欧美 | 麻豆国产MV视频 | jealousvue成熟40岁 | 成人在免费视频手机观看网站 | 国产成人无码WWW免费视频在线 | 蜜柚免费视频高清观看在线 | 久久精品无码人妻无码AV蜜臀 | 麻生希快播在线 | 午夜DV内射一区二区 | 午夜免费无码福利视频麻豆 | 日本无吗高清 | 视频一区国产精戏刘婷30 | 四房色播手机版 | 亚洲成AV人片一区二区不卡 | 国产精品久久久久久搜索 | 毛片大全网站 | 青苹果乐园在线观看电视剧 | 亚洲国产精品一区二区三区在线观看 | 国产国产成年在线视频区 | 日日天干夜夜狠狠爱 | 国产午夜久久影院 | 欧美成人精品高清在线观看 | a亚洲在线观看不卡高清 | chinese东北老年tv视频 | 成人小视频在线免费观看 |

    電子發燒友

    中國電子工程師最喜歡的網站

    • 2931785位工程師會員交流學習
    • 獲取您個性化的科技前沿技術信息
    • 參加活動獲取豐厚的禮品