色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

Python中三個json組件的安裝方式

馬哥Linux運維 ? 來源:博客 ? 作者:隔葉黃鶯 ? 2021-09-23 14:35 ? 次閱讀

Python 使用用 json.dumps(data) 時突然發現特別慢,data 本身不大,但是一個包含很多元素的列表,所以促使本人尋找一個替代的 JSON 處理庫。大概對比了一個 ujson(UtltraJSON), python-rapidjson(RapidJSON) 和 Python 自帶的 json 庫。還有一個 simplejson 是為兼容 Python 2.6 以前用的(json 是 Python 2.6 新加入的 API),性能有些差?;旧辖€是老的辣,想要收獲更好的性能,還得仰賴傳統的 C/C++ 語言,ujson 是用純 C 寫的,RapidJSON 是 C++ 寫的,后者還是十美分的開源產品。json, ujson, rapidjson 三者 loads() 方法的性能差別不太明顯,但 dumps() 大對象時 Python 自帶的 json 庫就要考驗用戶的耐心了。注:最開始本來認定了 ujson 為最佳選擇, 所以先從 usjon 和 rapidjson 切入的,后來寫作本文的過程中,從 usjon 的自我介紹中發現了 Rust 寫的 orjson 很顯眼,才加入了 orjson 的測試,看來 orjson 更值得擁有。以上三個 json 組件的安裝方式分別為

pip install python-rapidjson

$ pip install simplejson

自己測試了一個 ujson 和 rapidjson 與 Python json 庫的 dumps() 的性能,simpejson 不太考慮了。測試代碼如下

# test.py

from time import timeimport sysimport string

num = int(sys.argv[1])lib = sys.argv[2]

items = []for i in range(num): items.append({c:c for c in string.ascii_letters})start = time()if lib == ‘ujson’: import ujson ujson.dumps(items)elif lib == ‘rapidjson’: import rapidjson rapidjson.dumps(items)else: import json json.dumps(items)

print(time() - start)

執行 python 1000|10000|100000|1000000 json|ujson|rapidjson, 試結果統計如下(數字為不同情況下的耗時):

31709712-0fb2-11ec-8fb8-12bb97331649.png

基本上測試的性能和 Benchmark of Python JSON libraries 中的是一致的。從原文中截取了兩張圖如下:

317e661c-0fb2-11ec-8fb8-12bb97331649.png

在 UltraJSON 的 Github 項目頁面中也有對比 ujson, nujson, orjson, simplejson, json 的 Benchmarks。其中列出的 orjson(pip install orjson) 和 nujson(pip install nujson, Fork 了 UltraJSON 來支持 Numpy 序列化的) 性能表現上不錯,orjson 表現上比 ujson 還更為卓越。

看到了 orjson 后,趕緊做個對比測試,在上面的 test.py 代碼中再加上

elif lib == ‘orjson’: import orjson orjson.dumps(items)

再列出完整的對比數據

319ddc4a-0fb2-11ec-8fb8-12bb97331649.png

繼續翻看 orjson 的 Github 主頁面 ijl/orjson, 它既非用 C 也不是用 C++ 寫的,而是 Rust 語言,真是讓我眼前一亮,Rust 程序運行速度真的能與 C/C++ 相媲美的。寫到這里我要開始改變當初只認 ujson 的主意了,orjson 或許是更佳的選擇, 本文的標題也由最初擬定的 “Python 處理 JSON 必要時我選擇 ujson(UltraJSON)” 變成了 “Python 處理 JSON 必要時我選擇 ujson 和 orjson”。這也是寫博客時,盡可能收集更多的素材多的魅力。

補充一下,orjson 的 dumps() 函數使用略有不同,不再用 indent 參數,并且返回值是 bytes,所以格式化成字符串的寫法如下

import orjson

json_str = orjson.dumps(record, option=orjson.OPT_INDENT_2).decode()

另外,在使用 ujson 時碰到的一個 bug 也順便記錄在此,就不立新篇了,反正現在找東西都不太看標題,而是 Google 到其中的內容。ujson 3.0.0 和 3.1.0 版本的 dumps() 的 indent 參數工作不正常,有個未關閉的 ticket ‘indent’ parameter for dumps doesn‘t indent properly in 3.0.0 #415。比如使用 ujson 3.1.0 時的現像是

》》》 import ujson》》》 ujson.dumps({’a‘: 1, ’b‘: 2})’{“a”:1,“b”:2}‘

》》》 ujson.dumps({’a‘: 1, ’b‘: 2}, indent=0)’{“a”:1,“b”:2}‘

》》》 ujson.dumps({’a‘: 1, ’b‘: 2}, indent=1)’{

“a”: 1,

“b”: 2

}‘

》》》 ujson.dumps({’a‘: 1, ’b‘: 2}, indent=2)’{

“a”: 1,

“b”: 2

}‘

》》》 ujson.dumps({’a‘: 1, ’b‘: 2}, indent=8)’{

“a”: 1,

“b”: 2

}‘

indent 大于 1 時都當作 1。

換回到 ujson 2.0.3 版本時沒問題

》》》 import ujson》》》 ujson.dumps({’a‘: 1, ’b‘: 2}, indent=2)’{

“a”: 1,

“b”: 2

}‘

》》》 ujson.dumps({’a‘: 1, ’b‘: 2}, indent=8)’{

“a”: 1,

“b”: 2

}‘

在這個問題未解決之前就暫時用 pip install ujson==2.0.3 安裝 ujson 2.0.3 吧,但是這個版本無法序列化 datetime 類型。

原文鏈接:https://yanbin.blog/python-json-choose-ujson-if-necessary/

責任編輯:haq

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • python
    +關注

    關注

    56

    文章

    4798

    瀏覽量

    84799
  • JSON
    +關注

    關注

    0

    文章

    119

    瀏覽量

    6980

原文標題:Python 處理 JSON 我選擇 ujson 和 orjson

文章出處:【微信號:magedu-Linux,微信公眾號:馬哥Linux運維】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    霍爾傳感器在相直流無刷電機中的安裝使用

    相直流無刷電機中,通常會使用三個霍爾傳感器來檢測轉子的位置,這三個霍爾傳感器的安裝通常有兩種方式:120度電角度
    的頭像 發表于 12-09 15:20 ?479次閱讀
    霍爾傳感器在<b class='flag-5'>三</b>相直流無刷電機中的<b class='flag-5'>安裝</b>使用

    在4片ADS127L11使用菊花鏈方式連接時,DRDY,START,RESET,每一片子的這三個管腳怎么接?

    在4片ADS127L11使用菊花鏈方式連接時候。DRDY,START,RESET,每一片子的這三個管腳怎么接?是分別都接mcu還是只用第一的ADS127L11的這
    發表于 11-20 07:54

    可調電阻三個腳怎么接 可調電阻怎么測量好壞

    可調電阻,也稱為電位器,是一種可以調節電阻值的電子元件。它通常有三個引腳:兩固定端和一可動端(或稱為中間抽頭)。可調電阻的三個腳的連接方式
    的頭像 發表于 10-18 14:45 ?2017次閱讀

    三個電流怎么判斷NPN還是PNP

    在判斷晶體管是NPN型還是PNP型時,主要依據是其內部半導體材料的排列方式以及電流在晶體管中的流動方向。闡述如何根據三個電流(通常指的是發射極電流IE、基極電流IB和集電極電流IC)來判斷NPN和PNP晶體管。
    的頭像 發表于 09-14 15:44 ?1522次閱讀

    基本理想電路元件的三個特征是什么

    基本理想電路元件是構成電路的基本單元,它們具有三個基本特征:電壓-電流關系、能量轉換和電路參數。以下是對這三個特征的分析: 電壓-電流關系 理想電路元件的電壓-電流關系是其最基本的特征之一。這種關系
    的頭像 發表于 08-25 09:38 ?1216次閱讀

    對稱相電壓的特點是哪三個方面

    對稱相電壓是電力系統中常見的一種電壓形式,它具有三個相位,每個相位之間的相位差為120度。對稱相電壓在工業生產和日常生活中有著廣泛的應用,如電動機、變壓器、發電機等。本文將從三個
    的頭像 發表于 08-12 18:18 ?1519次閱讀

    簡述極管的三個工作區域

    極管的三個區域,通常指的是其在不同工作條件下的狀態區域,即截止區、放大區和飽和區。這三個區域定義了極管在不同電壓和電流條件下的行為特性,對于理解和設計電子電路至關重要。
    的頭像 發表于 07-29 10:50 ?3798次閱讀

    可調變阻器三個引腳怎么區分

    可調變阻器,也稱為電位器或可變電阻器,是一種可以調節電阻值的電子元件。它廣泛應用于各種電子設備中,如音頻設備、電源管理、電機控制等??烧{變阻器有三個引腳,分別是固定端、滑動端和可調端。這三個引腳
    的頭像 發表于 07-24 11:12 ?1344次閱讀

    espidf組件是否有json組包或者messagePack的庫文件?

    espidf組件是否有json組包或者messagePack的庫文件
    發表于 06-21 07:10

    微波測量的三個基本參量是什么

    微波測量是電子工程領域中的一重要分支,它涉及到對微波信號的頻率、幅度、相位等參數的測量。在微波測量中,有三個基本參量:頻率、幅度和相位。這三個參量是微波信號的基本特征,對于微波系統的設計、調試
    的頭像 發表于 05-28 14:46 ?1433次閱讀

    如何判斷極管的三個極性

    極管是電子電路中的基本元件之一,其性能的好壞直接影響到整個電路的性能。而判斷極管的三個極性(基極b、發射極e、集電極c)是電路分析和設計中不可或缺的一步。下面將詳細介紹判斷極管
    的頭像 發表于 05-21 15:26 ?6801次閱讀

    籬笆三個樁——記晶體極管的發明

    籬笆三個樁——記晶體極管的發明
    的頭像 發表于 05-12 08:14 ?772次閱讀
    一<b class='flag-5'>個</b>籬笆<b class='flag-5'>三個</b>樁——記晶體<b class='flag-5'>三</b>極管的發明

    人機交互的三個階段 人機交互的常用方式

    機交互經歷的三個階段:命令行界面交互階段、圖形用戶界面交互階段、自然和諧的人機交互階段。
    的頭像 發表于 03-13 17:25 ?3186次閱讀

    基于Python的地圖繪制教程

    本文將介紹通過Python繪制地形圖的方法,所需第Python相關模塊包括 rasterio、geopandas、cartopy 等,可通過 pip 等方式
    的頭像 發表于 02-26 09:53 ?1247次閱讀
    基于<b class='flag-5'>Python</b>的地圖繪制教程

    飛機的三個舵面以及如何控制

    飛機通常具有三個主要的舵面,它們是方向舵(rudder)、副翼(aileron)和升降舵(elevator)。
    發表于 01-15 14:54 ?6076次閱讀
    飛機的<b class='flag-5'>三個</b>舵面以及如何控制
    主站蜘蛛池模板: 午夜办公室在线观看高清电影| 一级做a爰片久久毛片潮喷动漫| 2021国产精品一卡2卡三卡4卡| 久久re这里精品在线视频7| 精品久久久噜噜噜久久久app| 人体内射精一区二区三区| 二级片免费看| 亚洲av欧美在我| 久久精品视在线观看85| a4you销魂gogo人体| 无码专区aaaaaa免费视频| 成人精品在线视频| 男女又黄又刺激B片免费网站| 亚洲欧美日韩在线观看一区二区三区| 二级毛片免费观看全程| 亚洲高清无在码在线电影| 芒果影院网站在线观看| 白洁在线观看| 欧美亚洲日韩国产在线在线| 国产精品一区二区人妻无码| 中文在线日韩亚洲制服| 三级视频黄色| 毛片手机在线观看| 国产精品你懂的在线播放| 1000视频在线播放| 女人18毛片| brazzers欧美最新版视频| 无码天堂亚洲内射精品课堂| 邻居的阿2中文字版电影| 国产精品igao视频网网址| 亚洲AV久久久久久久无码| 名女躁b久久天天躁| 狠狠躁天天躁小说| 在线免费视频国产| 考好老师让你做一次H| 国产精彩视频在线| 99这里只有是精品2| 影音先锋av男人资源| 伦理79电影网在线观看| 国产精品A久久久久久久久| 97免费在线视频|