色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

X3派基于PaddlePaddle的推理模型部署

地瓜機器人 ? 2022-12-14 15:56 ? 次閱讀

一、目標

本次工作的目標是在旭日X3派上部署PaddlePaddle的開源模型,至于PaddlePaddle模型轉換,已有大佬寫過很贊的教程,自我感覺不能超越,于是本文不再提及。

飛槳(PaddlePaddle)是集深度學習核心框架、工具組件和服務平臺為一體的技術先進、功能完備的開源深度學習平臺,已被中國企業廣泛使用,深度契合企業應用需求,擁有活躍的開發者社區生態。提供豐富的官方支持模型集合,并推出全類型的高性能部署和集成方案供開發者使用。

二、環境準備

1、python環境

旭日X3派的官方img支持的是python3.8,這個跟PaddlePaddle要求的3.6版本不同,因為PaddlePaddle SDK使用的tensor模塊等依賴python3.6,所以要在X3派系統中使用python3.6。網上很多種方法,譬如通過pyenv、anaconda等python版本管理工具進行python版本切換,因為在實際使用中可以指定使用的python版本,為什么不能再裝個python3.6呢?需要python3.8的時候敲python3,需要python3.6的時候敲python3.6,感覺不錯。

sudo apt-get install software-properties-common -y sudo add-apt-repository ppa:deadsnakes/ppa sudo apt-get update sudo apt-get install python3.6 -y sudo apt-get install libpython3.6 -y sudo apt-get install python3.6-dev -y sudo apt-get install python3.6-distutils -y

一系列命令敲下來,python3.6環境已經按照完成,直接使用即可。

1.png

2、SDK下載

直接在官網(EasyEdge端計算模型生成平臺)下載PaddlePaddle SDK,選擇需要的SDK即可,因為是要部署在X3派上,所以選擇了 操作系統Linux,且部署芯片為通用ARM芯片的模型,這次我選擇的是PPLCNetV2。

PPLCNet是百度團隊設計的輕量高性能網絡PP-LCNet,所提方案在圖像分類任務上取得了比ShuffleNetV2、MobileNetV2、MobileNetV3以及GhostNet更優的延遲-精度均衡。

PPLCNetV2當然比PPLCNetV1牛逼了,一會試試圖像分類功能。

三、模型部署

1、PaddlePaddle安裝

直接使用如下命令安裝PaddlePaddle:

python3.6 -m pip install http://aipe-easyedge-public.bj.bcebos.com/easydeploy/paddlelite-2.11-cp36-cp36m-linux_aarch64.whl

記得一定要用python3.6…

2、安裝WHL包

將2.2節下載的SDK包解壓縮,傳輸至X3派,首先安裝python目錄下(當然也可以選擇C++,python直接運行了,方便)的BaiduAI_EasyEdge_SDK-1.3.1-cp36-cp36m-linux_aarch64.whl包,記得用python3.6,中間可能會根據系統的情況,下載安裝numpy,opencv-python等,耐心等待即可,直到安裝成功。

2.png

四、預測圖像

直接在系統上運行的命令格式如下,記得使用python3.6:

python3.6 demo_x86_cpu.py {模型RES文件夾}{測試圖片路徑}

1、鴨子

結果如下:

root@ubuntu:~/EasyEdge-Linux-arm/python/infer_demo# python3.6 demo_armv8_cpu.py ../../RES /root/ducks.jpg 2022-09-17 00:36:30 INFO [EasyEdge] [demo_armv8_cpu.py:38] 548210040848: Init paddlelite engine... Loading topology data from ../../RES/model Loading params data from ../../RES/params 1. Model is successfully loaded! 2022-09-17 00:36:31 INFO [EasyEdge] [demo_armv8_cpu.py:38] 548210040848: Paddlelite engine version: v2.11 infer done! {'confidence': 0.36856314539909363, 'index': 97, 'label': 'n01847000 drake'}

2、螞蟻

測試結果,ant, emmet, pismire都是螞蟻:

root@ubuntu:~/EasyEdge-Linux-arm/python/infer_demo# python3.6 demo_armv8_cpu.py ../../RES /root/ants.jpg 2022-09-17 00:37:40 INFO [EasyEdge] [demo_armv8_cpu.py:38] 548581892112: Init paddlelite engine... Loading topology data from ../../RES/model Loading params data from ../../RES/params 1. Model is successfully loaded! 2022-09-17 00:37:41 INFO [EasyEdge] [demo_armv8_cpu.py:38] 548581892112: Paddlelite engine version: v2.11 infer done! {'confidence': 0.9655985832214355, 'index': 310, 'label': 'n02219486 ant, emmet, pismire'}

本文轉自地平線開發者社區
原作者:大菠蘿Alpha

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 嵌入式
    +關注

    關注

    5085

    文章

    19138

    瀏覽量

    305705
  • Linux
    +關注

    關注

    87

    文章

    11312

    瀏覽量

    209702
  • 模型
    +關注

    關注

    1

    文章

    3254

    瀏覽量

    48878
  • python
    +關注

    關注

    56

    文章

    4797

    瀏覽量

    84750
收藏 人收藏

    評論

    相關推薦

    智譜推出深度推理模型GLM-Zero預覽版

    近日,智譜公司正式發布了其深度推理模型GLM-Zero的預覽版——GLM-Zero-Preview。這款模型標志著智譜在擴展強化學習技術訓練推理模型方面的重大突破,成為其首個專注于增強AI推理
    的頭像 發表于 01-03 10:42 ?81次閱讀

    智譜GLM-Zero深度推理模型預覽版正式上線

    近日,智譜公司宣布其深度推理模型GLM-Zero的初代版本——GLM-Zero-Preview已正式上線。這款模型是智譜首個基于擴展強化學習技術訓練的推理模型,標志著智譜在AI推理領域
    的頭像 發表于 01-02 10:55 ?84次閱讀

    阿里云發布開源多模態推理模型QVQ-72B-Preview

    近日,阿里云宣布了一項重大技術突破,正式發布了業界首個開源多模態推理模型——QVQ-72B-Preview。這一模型的問世,標志著阿里云在AI技術領域的又一次重要飛躍
    的頭像 發表于 12-27 10:28 ?179次閱讀

    OpenAI發布新一代推理模型o3及o3-mini

    近日,OpenAI在為期12天的發布會上宣布了新一代推理模型o3及其精簡版o3-mini。這兩款模型被專門設計用于在回答問題之前進行更深入的思考,以期提高答案的準確性。 據悉,o
    的頭像 發表于 12-24 09:29 ?335次閱讀

    OpenAI推出新一代推理模型o3系列

    在AI技術日新月異的今天,OpenAI再次引領潮流,于近日正式發布了其新一代的推理模型系列——o3。此次發布的o3系列包括兩個版本,分別是標準版的o3和精簡版的o
    的頭像 發表于 12-23 11:00 ?273次閱讀

    AI模型部署邊緣設備的奇妙之旅:目標檢測模型

    網絡(DenseNet)等創新設計都是為了克服深層網絡訓練中的挑戰而提出的。 3 邊緣端設備部署 在邊緣端設備部署目標檢測模型,特別是像PP-PicoDet這樣輕量級且高效的
    發表于 12-19 14:33

    如何開啟Stable Diffusion WebUI模型推理部署

    如何開啟Stable Diffusion WebUI模型推理部署
    的頭像 發表于 12-11 20:13 ?111次閱讀
    如何開啟Stable Diffusion WebUI<b class='flag-5'>模型</b><b class='flag-5'>推理</b><b class='flag-5'>部署</b>

    阿里云開源推理模型QwQ

    近日,阿里云通義團隊宣布推出全新AI推理模型QwQ-32B-Preview,并同步實現了開源。這一舉措標志著阿里云在AI推理領域邁出了重要一步。 據評測數據顯示,QwQ預覽版本已具備研究生水平的科學
    的頭像 發表于 11-29 11:30 ?567次閱讀

    Kimi發布新一代推理模型k0-math

    近日,Kimi國產大模型正式推出了其首款強化推理能力的模型——k0-math。該模型在多項數學基準能力測試中展現出了出色的表現,成功對標了OpenAI的o1系列
    的頭像 發表于 11-19 17:18 ?734次閱讀

    Kimi發布新一代數學推理模型k0-math

    近日,Kimi正式推出了其新一代數學推理模型k0-math。據基準測試顯示,該模型的數學能力可與全球領先的OpenAI o1系列中的o1-mini和o1-preview模型相媲美。 在針對中考、高考
    的頭像 發表于 11-18 11:38 ?449次閱讀

    高效大模型推理綜述

    模型由于其在各種任務中的出色表現而引起了廣泛的關注。然而,大模型推理的大量計算和內存需求對其在資源受限場景的部署提出了挑戰。業內一直在努力開發旨在提高大
    的頭像 發表于 11-15 11:45 ?411次閱讀
    高效大<b class='flag-5'>模型</b>的<b class='flag-5'>推理</b>綜述

    OpenAI即將發布“草莓”推理模型

    科技界迎來新動態,據可靠消息透露,OpenAI正緊鑼密鼓地籌備著一項重大發布——預計在兩周內,將正式推出名為“草莓”的新型AI推理模型,并將其無縫融入ChatGPT服務中。這款以卓越推理能力為核心的大模型,旨在突破現有GPT-4
    的頭像 發表于 09-11 16:53 ?535次閱讀

    LLM大模型推理加速的關鍵技術

    LLM(大型語言模型)大模型推理加速是當前人工智能領域的一個研究熱點,旨在提高模型在處理復雜任務時的效率和響應速度。以下是對LLM大模型
    的頭像 發表于 07-24 11:38 ?904次閱讀

    基于OpenCV DNN實現YOLOv8的模型部署推理演示

    基于OpenCV DNN實現YOLOv8推理的好處就是一套代碼就可以部署在Windows10系統、烏班圖系統、Jetson的Jetpack系統
    的頭像 發表于 03-01 15:52 ?1676次閱讀
    基于OpenCV DNN實現YOLOv8的<b class='flag-5'>模型</b><b class='flag-5'>部署</b>與<b class='flag-5'>推理</b>演示

    使用愛芯Pro開發板部署人體姿態估計模型

    在經過之前對于開發板的使用,以及通過幾個愛芯官方給出的示例demo(mobilenet/yolov5)在開發板上的部署之后,筆者也逐漸了解了愛芯這塊開發板利用其官方的推理引擎和pi
    的頭像 發表于 01-09 09:50 ?1450次閱讀
    使用愛芯<b class='flag-5'>派</b>Pro開發板<b class='flag-5'>部署</b>人體姿態估計<b class='flag-5'>模型</b>
    主站蜘蛛池模板: 后入内射国产一区二区| 夜色88V精品国产亚洲AV| 国产精品一区二区AV交换| 伊人久久大香线蕉影院95| 秋霞电影网午夜免费鲁丝片| 韩国免费啪啪漫画无遮拦健身教练| 国产女人视频免费观看| 一个人的HD高清在线观看 | 日本性hd| 久久久精品国产免费A片胖妇女| 亚洲欧美一区二区成人片| 欧美日韩另类在线专区| 金瓶梅 快播| 国产精品人妻无码99999| china中国gay偷拍| 中文字幕 亚洲 有码 在线 | 亚洲精品无码国产爽快A片| 欧美男女爱爱| 老子午夜伦不卡电影院| 久久视热频国产这里只有精品23| 日本久久中文字幕精品| 久久伦理影院| 狠狠色狠狠色综合日日92| 国产成人久久精品AV| 办公室的秘密2中文字幕| 99pao成人国产永久免费视频| 漂亮的保姆3中文版完整版 | jk白丝袜美女被男人桶| 印度老妇女bbbxxx| 亚洲熟妇色自偷自拍另类| 亚洲国产综合人成综合网站00| 精品日韩视频| 国产精品高清m3u8在线播放| 顶级少妇AAAAABBBBB片| A级毛片无码久久精品免费| 91久久精品一区二区三区| 2019精品国产品在线不卡| 在线精品国精品国产不卡| 中文字幕亚洲无线码高清不卡| 青青青青草| 国产乱国产乱老熟300部视频|