色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

用于在超聲圖像中對毫米尺度機器人膠囊進行2D姿態估計的方法

MEMS ? 來源:MEMS ? 2022-12-28 11:51 ? 次閱讀

具有移動能力和采樣機構的可口服機器人膠囊在胃腸道無創診斷和介入治療方面具有巨大的潛力。實時跟蹤膠囊位置和運行狀態對于臨床應用是必要的,但這仍然是一個重大挑戰。

據麥姆斯咨詢報道,近日,加拿大多倫多大學(University of Toronto)和美國范德堡大學(Vanderbilt University)的研究人員組成的團隊在Scientific Reports期刊上發表了題為“Capsule robot pose and mechanism state detection in ultrasound using attention-based hierarchical deep learning”的最新論文,提出了一種基于注意力的分層深度學習方法,以用于在超聲圖像中對毫米尺度機器人膠囊進行2D姿態估計和機構狀態檢測。實驗結果表明,膠囊狀態分類的準確率為97%,方位和質心位置的平均估計誤差為2.0°和0.24mm(膠囊體長的1.7%)。提出的方法有望推進無線膠囊機器人技術的發展。

無線膠囊機器人在靶向給藥、活檢取樣和胃腸道(GI)局部診斷等任務中顯示出巨大的潛力。盡管內窺鏡手術通常被用于胃腸道的診斷和治療,但內窺鏡檢查需要麻醉,并存在腸道破裂的風險。基于微創膠囊機器人的技術有望替代內窺鏡。對于使用無線膠囊機器人進行活檢或靶向治療等手術,需要準確和實時地跟蹤膠囊位置和運行狀態。

磁定位技術作為一種用于無線膠囊內窺鏡(WCE)姿態估計的無遮擋跟蹤方案已被廣泛研究。典型的配置是將一個或多個小永磁體封裝在膠囊中,并使用外部傳感器根據感測到的磁場數據確定膠囊的姿態。現有方法以高定位精度實現了實時精度,但是由于執行器對定位系統的干擾,因此無法實現對膠囊的同步磁驅動。

為了解決這個問題,研究人員已經提出了一種約束在3 x 3平面內的線圈系統,以最小化執行器對傳感器的影響。Y. Xu等實現了WCE的同步磁驅動和定位,并通過使用積分濾波器消除了磁干擾。然而,這種系統受限于相對較低的姿態更新頻率(約0.5~1.0Hz)。此外,磁跟蹤無法對胃腸道生理學方面進行定位,而這對于許多應用(例如靶向取樣、活檢或治療遞送等)來說是必需的。超聲引導的膠囊機器人將通過使用安全、無創成像模式跟蹤膠囊來解決這些障礙,該成像模式還有潛力定位膠囊的胃腸道位置。

與磁共振成像(MRI)和X射線等其他醫學成像技術相比,超聲成像技術因其結合了高時間分辨率和無電離輻射成像,成本較低,且更容易實現,因此受到人們青睞。盡管超聲成像已在許多臨床應用中使用,但使用GI超聲成像膠囊仍存在一些挑戰。胃腸道由5個管狀組織層組成,這些組織層是交替產生回聲和消聲的材料,在超聲B模式掃描中表現為亮層和暗層。此外,胃腸道內部充滿了空氣、水和消化物質的混合物,這在超聲B模式圖像中表現為許多斑點和明暗對比的區域。在這種環境下,膠囊機器人的精確檢測和跟蹤是非常具有挑戰性的。

雖然超聲成像被熟練的超聲醫師手動使用作為診斷工具,但仍需要對膠囊機器人進行基于計算機的自動跟蹤,因為(1)具有移動或機構驅動能力的膠囊機器人必須同時被跟蹤和控制,這對操作員來說是一個重大的挑戰,因為這要求操作員對膠囊和超聲系統的動力學和操縱具有良好的了解;以及(2)在B模式圖像中,通過手動從背景組織中識別設備和膠囊機載機構狀態來進行精確的圖像判讀是特別困難的。研究人員提出了一種自動檢測方法用于幫助臨床醫生進行膠囊操縱,可在無需超聲醫師持續關注的情況下進行膠囊跟蹤,并提供更標準化的反饋。這種自動跟蹤將使臨床醫生通過解剖工作空間指定的路徑實現完全閉環控制。

在本論文中,作者們提出了一種基于注意力的分層深度學習方法,并在非醫學數據集上采用訓練有素的CNN模型,以在離體豬胃腸道中使用超聲成像對毫米級機器人膠囊進行2D姿態估計和機構狀態檢測。該膠囊機器人由封裝在軟彈性體樣品室中的兩個永磁體構成。它具有一個磁力驅動的取樣機構,當被施加磁場時,該機構會使膠囊打開以進行取樣或治療給藥。膠囊的直徑和長度分別設計為8mm和14.5mm。在臨床使用期間,膠囊在口服給藥后通過胃腸道,并在移動期間保持關閉,只有在到達目標位置時才被激活以打開進行取樣或藥物釋放。最后,膠囊可以通過常規的糞便通道取回。

他們考慮了膠囊機器人的三種可能的機構狀態:閉合、打開和消失在視場(FOV)中(由于周圍組織引起的離面運動或閉塞),如圖1b–d所示。膠囊機器人在超聲圖像坐標系U中的2D姿態定義為(xU,yU,θU),超聲成像平面內的質心位置和方向如圖1b所示。

15304e6c-7d5c-11ed-8abf-dac502259ad0.jpg

圖1 膠囊機器人的三種可能的機構狀態

為了訓練神經網絡,他們在離體豬胃內生成了機器人膠囊的代表性數據集。實驗結果表明,在測試集上,膠囊狀態分類的準確率為97%,方位和質心位置的平均估計誤差為2.0°和0.24mm(膠囊體長的1.7%)。在豬胃和結腸中通過外部磁體操縱膠囊機器人時,對膠囊的精確檢測也得到了證實。結果表明,通過在臨床場景中提供膠囊機器人的精確檢測,提出的方法有望推進無線膠囊機器人技術的發展。

15460f72-7d5c-11ed-8abf-dac502259ad0.jpg

圖2 離體豬胃實驗設置

155124de-7d5c-11ed-8abf-dac502259ad0.jpg

圖3 膠囊機器人的離體姿態估計和機構狀態檢測結果

本論文研究工作的主要貢獻包括:

(1)這項研究工作演示了在離體豬胃腸道超聲B模式成像下對無線膠囊機器人的姿態和運行狀態的檢測。這允許將超聲引導的臨床手術整合到常規工作流程中,以協助臨床醫生使用膠囊機器人。

(2)這項研究工作提出了一種新的基于注意力的分層深度學習方法,以增強特征表示能力,并首次將在非醫學數據集上預訓練的CNN模型應用于目標跟蹤任務的臨床數據集。基于離體超聲圖像開發的訓練模型具有很大的臨床價值,可以作為超聲引導的醫療器械在體內跟蹤的預訓練模型。

(3)這項研究工作提供了一個在離體臨床相關環境中的超聲圖像的大型標記數據集,用于對微尺度膠囊機器人跟蹤算法的開發進行基準測試。





審核編輯:劉清

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 傳感器
    +關注

    關注

    2550

    文章

    51047

    瀏覽量

    753164
  • 磁共振成像
    +關注

    關注

    0

    文章

    20

    瀏覽量

    8591
  • 執行器
    +關注

    關注

    5

    文章

    377

    瀏覽量

    19349

原文標題:基于注意力的分層深度學習方法,用于膠囊機器人姿態和機構狀態的超聲成像檢測

文章出處:【微信號:MEMSensor,微信公眾號:MEMS】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    《具身智能機器人系統》第1-6章閱讀心得之具身智能機器人系統背景知識與基礎模塊

    ,互聯網行業占成熟經濟體的GDP增長的21%,世界經濟正面向數字經濟轉型的大趨勢。具身智能機器人集成人工智能、高端制造、新材料等技術,其核心在于通過智能體與環境的動態互動實現智能行為。 2章“具身
    發表于 12-19 22:26

    Sonair推出用于機器人避障的3D超聲波傳感器

    據麥姆斯咨詢報道,Sonair近日發布一款用于自主移動機器人(AMR)和自動導引車(AGV)避障的新型3D超聲波傳感器。 Sonair將新型3D
    的頭像 發表于 11-16 09:57 ?585次閱讀

    【開源項目】你準備好DIY一款功能強大的機器人了嗎?

    歡迎來到DIY SMARS Robot 機器人制作教程!本教程,將教你制作這款功能強大的機器人,它配備了OLED顯示屏、RGB LED燈和可播放旋律的蜂鳴器等新功能。一起來設計電
    發表于 11-08 10:53

    用于機器人視覺系統的LED光源

    工業光源機器視覺系統扮演著至關重要的角色,它們直接影響到圖像采集的質量以及后續圖像處理的效率和準確性。
    的頭像 發表于 08-30 13:10 ?220次閱讀
    適<b class='flag-5'>用于</b><b class='flag-5'>機器人</b>視覺系統的LED光源

    智能移動機器人

    富唯智能移動機器人分為復合機器人和轉運機器人,搭載ICD核心控制器,實現一體化控制,最快可實現15分鐘現場機器人的快速部署,無縫對接產線,配合自研2
    的頭像 發表于 08-27 17:22 ?335次閱讀
    智能移動<b class='flag-5'>機器人</b>

    機器人視覺技術中常見的圖像分割方法

    機器人視覺技術圖像分割方法是一個廣泛且深入的研究領域。圖像分割是將圖像劃分為多個區域或對象的
    的頭像 發表于 07-09 09:31 ?665次閱讀

    機器人視覺技術圖像分割方法有哪些

    機器人視覺技術是人工智能領域的一個重要分支,它涉及到圖像處理、模式識別、機器學習等多個學科。圖像分割是機器人視覺技術
    的頭像 發表于 07-04 11:34 ?938次閱讀

    編碼器機器人系統的應用

    隨著科技的飛速發展,機器人技術已廣泛應用于工業、醫療、服務等多個領域。機器人系統,編碼器作為核心的位置和速度檢測裝置,發揮著至關重要的作
    的頭像 發表于 06-13 14:51 ?820次閱讀

    基于FPGA EtherCAT的六自由度機器人視覺伺服控制設計

    、Zynq和攝像頭為硬件基礎,搭建了六自由度機器人視覺平臺。 (2)設計了基于 FPGA的視覺檢測方案。利用 西林提供的 HLS和CV庫對從攝像頭采集到的像素流進行實時處理,并設計了一套識別物塊坐標
    發表于 05-29 16:17

    生醫應用的磁控膠囊機器人,實現多模態響應與多功能集成

    膠囊機器人可以通過口服方式抵達胃腸道病灶區域實施醫療功能,為實現胃腸道疾病無痛無創診療和提高患者依從性提供了重要途徑。
    的頭像 發表于 03-14 15:36 ?1119次閱讀
    生醫應用的磁控<b class='flag-5'>膠囊</b><b class='flag-5'>機器人</b>,實現多模態響應與多功能集成

    移動協作機器人的RGB-D感知的端到端處理方案

    本文提出了一種用于具有雙目視覺的自主機器人的三維語義場景感知的端到端流程。該流程包括實例分割、特征匹配和點集配準。首先,利用RGB圖像進行單視圖三維語義場景分割,將
    發表于 02-21 15:55 ?682次閱讀
    移動協作<b class='flag-5'>機器人</b>的RGB-<b class='flag-5'>D</b>感知的端到端處理方案

    介紹一種使用2D材料進行3D集成的新方法

    美國賓夕法尼亞州立大學的研究人員展示了一種使用2D材料進行3D集成的新穎方法
    的頭像 發表于 01-13 11:37 ?1063次閱讀

    一種用于2D/3D圖像處理算法的指令集架構以及對應的算法部署方法

    二維(2D)和三維(3D)雙模視覺信息自動駕駛、工業機器人、人機交互等前沿領域具有廣泛的應用前景。
    的頭像 發表于 01-05 10:35 ?459次閱讀
    一種<b class='flag-5'>用于</b><b class='flag-5'>2D</b>/3<b class='flag-5'>D</b><b class='flag-5'>圖像</b>處理算法的指令集架構以及對應的算法部署<b class='flag-5'>方法</b>

    【愛芯派 Pro 開發板試用體驗】人體姿態估計模型部署前期準備

    使用到,這里給大家舉幾個例子: 1、虛擬主播:大家看到B站直播時的“皮套”,通常通過一個2D live的形象展示一個動漫形象,然后和主播同步動作。這就是通過攝像頭識別當前主播姿態,再同步到虛擬形象上實現
    發表于 01-01 01:04

    子母式微納米機器人系統,用于顱內跨尺度靶向給藥

    該團隊分別在體外膠質瘤細胞微環境和離體豬腦組織內開展了試驗。結果表明,微納米機器人可遠距離遞送到指定病灶,釋放藥物殺死膠質瘤細胞。這驗證了該研究所提出的子母式微納米機器人尺度遞送方法
    的頭像 發表于 12-26 16:40 ?427次閱讀
    子母式微納米<b class='flag-5'>機器人</b>系統,<b class='flag-5'>用于</b>顱內跨<b class='flag-5'>尺度</b>靶向給藥
    主站蜘蛛池模板: 国产精品俺来也在线观看| 欧洲另类一二三四区| gogo免费在线观看| 亚洲AV一宅男色影视| 男同志china免费视频| 韩国黄色影院| 大陆老太交xxxxxhd在线| 永久adc视频年龄确认| 无人区日本电影在线观看高清| 毛片免费大全| 国产在线播放91| 啊好大好厉害好爽真骚| 在线不卡日本v二区到六区| 午夜无码国产理论在线| 秋霞久久久久久一区二区| 久久久久综合| 国产在线观看99| 国产AV亚洲精品久久久久软件| 91欧美秘密入口| 一本道综合久久免费| 双性将军粗壮H灌满怀孕| 男人天堂黄色| 久久国产乱子伦精品免费不卡| 国产色欲一区二区精品久久呦| 成人麻豆日韩在无码视频| BL文库好大粗黑强强肉NP| 最近中文字幕高清中文字幕MV| 亚洲精品视频免费看| 午夜免费福利| 色综合欧美色综合七久久| 欧美人与动牲交A精品| 免费精品国产人妻国语| 久久久久久亚洲精品影院| 久久99热在线观看7| 黑色丝袜美女被网站| 国产在线观看的| 国产午夜高潮熟女精品AV| 国产精品99久久久久久动态图 | 99精品视频在线观看免费| 野草视频在线观看| 野花香在线观看免费高清播放视频 |