色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

GIL在CPython解釋器中的工作原理

FPGA之家 ? 來源:編程技術宇宙 ? 作者:軒轅之風 ? 2022-09-01 10:24 ? 次閱讀

我是一個Python線程,我的工作就是解釋執行程序員編寫的Python代碼。

之所以說是解釋執行,是因為Python是高級語言,CPU那家伙不認識Python代碼,需要運行的時候動態翻譯成CPU指令。

a961259e-2996-11ed-ba43-dac502259ad0.png

我把Python源代碼經過“編譯”以后,變成了一個個的字節碼文件:.pyc,這是一個二進制的文件,人類是看不懂的,只有我才能看懂。

然后我的工作就簡單了,不斷的取出字節碼文件中的“指令”解釋執行,直到所有指令都執行完成,我就可以休息了。

a973c690-2996-11ed-ba43-dac502259ad0.png

GIL

后來,多線程編程技術流行了起來,進程里不止我一個線程了,又來了幾個新的伙伴。

本以為我們能和平共處,沒想到這一來就麻煩了,我們幾個各干各的,經常把內存空間搞出問題,也找不到背鍋的人。

終于有一天,我實在忍受不了了,召集大家商討個解決辦法。

“小伙伴們,咱們不能再這樣各搞各的了,咱們是一個Team,要彼此協作,一個線程可以走的很快,但一群線程在一起才能走的更遠吶!”

“老大,你有什么想法你就直說吧”,另一個線程說到。

“要不,咱們加個鎖吧!簡單快捷,每個線程要執行代碼,都得來申請這個鎖,申請到了才能執行,否則就得等著”,我說到。

“那什么時候釋放呢?”

“要不弄個計數器,每個線程數到100就釋放,這樣保證別人有機會來執行?”

“那怎么計數呢?每執行一個字節碼就計數一次嗎?”

“可以,不過也不用那么死板,有些指令比較簡單的,很快可以完成,就可以不用計數了”

“好是好,但要是還沒數夠100,卻在執行I/O操作阻塞了,還把鎖霸占的話,那不是資源浪費嗎?”

小伙伴們七嘴八舌的討論著。

a98d4a48-2996-11ed-ba43-dac502259ad0.png

我想了想說到:“那就這樣,把兩種情況結合一下,常規情況下數到100就釋放一次鎖,但如果遇到阻塞情況,也要提前釋放鎖,怎么樣?”

大伙紛紛點頭,達成了一致,隨后我們還給這個鎖取了一個名字:全局解釋器鎖GIL。

自從用上了GIL,我們大家伙干活都規矩多了,再也沒有出現把公共資源搞壞的情況了。

升級版GIL

再后來,多核技術開始興起了,一個CPU里面可以同時執行多個線程。小伙伴們高興地把這個消息散播開了。

“老大,現在CPU有多核了,咱們可以一起執行了,可不可以把那個GIL給去掉啊,這樣才能利用多核的優勢啊?!?/p>

“是啊,隔壁Java線程老是嘲笑我們看起來人多,實際只有一個線程在執行”

可說易行難,這么多年我們都是這樣工作的,要突然去掉,出了問題誰也不敢負責啊。

“可是老大,現在這個GIL鎖不公平”,新來的線程抱怨到。

“哪里不公平了?”

“我準備執行代碼,發現鎖在你的手里,只好原地等待,等了半天都睡著了,好不容易等到你釋放了,操作系統把我給喚醒,準備去申請鎖,結果發現又被你搶到了,真是浪費表情”,新的線程滿臉委屈。

“是啊,老大,我也發現了,這不是偶發現象,我觀察很久了,經常都會發生!頻繁被喚醒,卻發現白忙活一場,白白浪費CPU資源,大家都怨氣很大啊”,另一個線程伙伴也說到。

a99c8710-2996-11ed-ba43-dac502259ad0.png

我有些不好意思,“嗯,這確實是個問題”

“還沒完呢”,新來的線程繼續說到:“現在按照字節碼指令數來統計,但有些指令碼簡單,有些很復雜,導致同樣數到100,有些線程可以運行很久,而有些就運行很快就結束了,也不公平”

小伙伴們提的問題都很重要,看來是時候對GIL進行一次升級了。

經過一陣激烈的討論,我們改進了原來對GIL,用上了新的策略:

不再用計數的方式,改用時間片的方式:每個線程的執行時間片是5000微秒。

為了保證釋放GIL后,不被自己馬上又搶到,新增了一個鎖實現強制線程切換

改進以后,這下總算公平了,各位小伙伴再也沒有話說,又可以安心的工作了。

結語

Python是一門解釋執行的語言,擁有強大的第三方庫和跨平臺能力,近幾年Python煥發了第二春,橫掃爬蟲、web開發、機器學習等眾多領域。

但長期以來,Python最為人詬病的就是它有一把鎖:GIL,這把鎖讓Python無法真正的實現多線程執行,無法利用多核CPU的高性能。

實際上,這個鎖跟Python沒有半毛錢的關系,而是負責解釋執行Python的解釋器:CPython的鍋。

CPython是用C語言編寫的Python解釋器,也是最廣為使用的Python解釋器,一般在沒有特殊說明時,說Python指的就是這個CPython解釋器。

Python誕生之初,多線程技術還遠沒有今天這么深入人心,甚至多核CPU也是Python誕生許多年后才出現的。早期的解釋器中為了支持多個線程,使用了粗暴的GIL來進行控制,方便簡單的同時,也成為了CPython的巨大歷史包袱。

Python3.2之前,Python使用簡單的計數法來統計控制每個線程執行的時間。在這之后,引入了更為公平的時間片方式來升級替換。

過去二十年,曾經有許許多多大牛都嘗試徹底去除GIL,但都沒有完美成功。

雖然Python沒能徹底去除GIL,好在,提供了其他幾種方式“曲線救國”實現并發:

Ctypes 通過編寫C語言擴展與Python交互,在C語言層面繞過GIL實現多核利用。

MultiProcess Python提供了MultiProcess,通過多進程的方式繞過GIL

協程 協程又稱用戶態線程,Python3.4版本后新增了對協程的支持,也是對性能的提升提供了一種選擇。



審核編輯:劉清

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • cpu
    cpu
    +關注

    關注

    68

    文章

    10855

    瀏覽量

    211610
  • 計數器
    +關注

    關注

    32

    文章

    2256

    瀏覽量

    94485
  • python
    +關注

    關注

    56

    文章

    4793

    瀏覽量

    84634
  • GIL
    GIL
    +關注

    關注

    0

    文章

    5

    瀏覽量

    6998

原文標題:天啦嚕!Python多線程居然是騙人的?

文章出處:【微信號:zhuyandz,微信公眾號:FPGA之家】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    氣體壓力傳感工作原理解析 氣體壓力傳感工業應用的作用

    氣體壓力傳感工作原理解析 1. 壓力傳感的基本概念 壓力傳感是一種將壓力信號轉換成電信號的裝置。它可以測量絕對壓力、差壓或表壓力。
    的頭像 發表于 12-09 16:19 ?389次閱讀

    CMOS傳感工作原理 CMOS技術相機的應用

    CMOS傳感工作原理 CMOS傳感的核心是其能夠將光信號轉換為電信號的能力。這種轉換是通過一個由光敏元件組成的陣列實現的,每個元件對應圖像的一個像素。以下是CMOS傳感
    的頭像 發表于 11-14 09:49 ?660次閱讀

    線性傳感工作原理

    線性傳感是一種檢測裝置,其工作原理基于輸入與輸出之間成線性關系的特性。以下是對線性傳感工作原理的詳細解釋
    的頭像 發表于 10-21 16:10 ?541次閱讀

    輔助電源的工作原理

     輔助電源的工作原理主要涉及主電源發生故障或不穩定時,自動切換到備用電源,以保證設備的持續供電。以下是關于輔助電源工作原理的詳細解釋
    的頭像 發表于 10-21 14:56 ?380次閱讀

    鋅銀電池的工作原理

    鋅銀電池的工作原理主要基于鋅和銀兩種金屬之間的氧化還原反應。以下是鋅銀電池工作原理的詳細解釋
    的頭像 發表于 10-03 14:59 ?1224次閱讀

    cmos電流反饋運放的工作原理是什么?

    這是一個cmos電流反饋型運放的原理圖 誰能詳細的解釋一下它的工作原理 具體每個mos有什么用 如何實現放大的 謝謝了
    發表于 09-23 07:40

    光耦合工作原理介紹

    電子電路設計,光耦合是一種關鍵元件,它通過光信號傳輸信息,實現電氣隔離。這種獨特的工作機制使得光耦合
    的頭像 發表于 09-14 10:37 ?642次閱讀
    光耦合<b class='flag-5'>器</b>的<b class='flag-5'>工作原理</b>介紹

    壓敏電阻開關電源工作原理

    壓敏電阻(Varistor)是一種非線性電阻元件,其電阻值隨著電壓的增加而急劇減小。開關電源,壓敏電阻主要用于保護電路免受電壓尖峰和浪涌電流的損害。 1. 壓敏電阻的基本特性 壓敏電阻的主要材料
    的頭像 發表于 09-06 09:10 ?680次閱讀

    VCO的工作原理是什么

    VCO(Voltage-Controlled Oscillator,電壓控制振蕩)的工作原理是基于電子器件的非線性特性,通過改變輸入電壓來調整輸出信號的頻率。以下是對VCO工作原理的詳細闡述,包括其電路結構、
    的頭像 發表于 08-20 17:16 ?1734次閱讀

    驅動工作原理

    驅動工作原理 驅動,又稱為執行,是將電能、氣能、液壓能等能量轉換為機械能的裝置。驅動廣泛應用于工業自動化、機器人、航空航天、汽車制
    的頭像 發表于 06-10 16:08 ?2324次閱讀

    信號發生工作原理

    信號發生工作原理主要是基于電路的振蕩和放大器來產生、調整和輸出所需的電信號。
    的頭像 發表于 05-07 15:39 ?1257次閱讀

    磁阻效應傳感工作原理

    傳感工作原理。 首先,需要了解一些基礎概念。材料中,電子具有自旋和電荷兩個性質。自旋是量子力學的一個概念,指的是電子自身固有的旋轉角動量。磁性材料的原子內部的電子
    的頭像 發表于 03-06 15:54 ?1598次閱讀

    數字電位的基本工作原理 數字電位電路的作用

    至關重要的作用,可以用于音頻控制、亮度調節、電壓調節等許多應用。本文將詳細解釋數字電位工作原理,并介紹其電路
    的頭像 發表于 02-02 13:51 ?4968次閱讀
    數字電位<b class='flag-5'>器</b>的基本<b class='flag-5'>工作原理</b> 數字電位<b class='flag-5'>器</b><b class='flag-5'>在</b>電路<b class='flag-5'>中</b>的作用

    發電系統負載有什么用?負載是什么工作原理和結構?

    發電系統負載有什么用?負載是什么工作原理和結構? 負載
    的頭像 發表于 01-04 15:29 ?841次閱讀

    信號隔離工作原理和作用

    信號隔離是一種廣泛應用于工業控制系統的電氣設備,其主要功能是電路實現信號的隔離和傳輸。信號隔離可以有效地解決地環路干擾、電磁干擾等
    的頭像 發表于 01-03 11:22 ?2790次閱讀
    主站蜘蛛池模板: 日本高清免费一本视频在线观看| 91免费网站在线看入口黄 | 亚洲欧美日本国产在线观18| 动漫美女搞鸡| 秋霞三级理伦免费观看| 91天仙tv嫩模福利| 久久天天综合| 伊人久久大香线蕉无码麻豆| 韩国污动漫无遮掩无删减电脑版| 午夜福利自怕| 国产毛片女人18水多| 天堂网久久| 国产精品99re6热在线播放| 色哦色哦哦色天天综合| 抽插内射高潮呻吟爆乳| 青柠在线观看免费高清电视剧荣耀 | 国内精品七七久久影院| 羞羞答答的免费视频在线观看| 国产精品.XX视频.XXTV| 双性被疯狂灌满精NP| 国产www视频| 午夜福利理论片在线播放| 国产精品青青在线麻豆| 午夜免费小视频| 果冻传媒在线播放| 亚洲日本欧美天堂在线| 久草精品在线| 19不插片免费视频| 免费精品国产人妻国语| 99久久精品国内| 秋霞伦理高清视频在线| 父亲猜女儿在线观看| 无套暴躁白丝秘书| 国语自产一区第二页| 夜月视频直播免费观看| 久久婷婷国产五月综合色啪最新 | 伊人久久国产精品| 蜜臀色欲AV无人A片一区 | VIDEOSGGRATIS欧美另类| 任你躁精品一区二区三区| 国产精品禁18久久久夂久|