在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

GIL在CPython解釋器中的工作原理

FPGA之家 ? 來源:編程技術宇宙 ? 作者:軒轅之風 ? 2022-09-01 10:24 ? 次閱讀

我是一個Python線程,我的工作就是解釋執行程序員編寫的Python代碼。

之所以說是解釋執行,是因為Python是高級語言,CPU那家伙不認識Python代碼,需要運行的時候動態翻譯成CPU指令。

a961259e-2996-11ed-ba43-dac502259ad0.png

我把Python源代碼經過“編譯”以后,變成了一個個的字節碼文件:.pyc,這是一個二進制的文件,人類是看不懂的,只有我才能看懂。

然后我的工作就簡單了,不斷的取出字節碼文件中的“指令”解釋執行,直到所有指令都執行完成,我就可以休息了。

a973c690-2996-11ed-ba43-dac502259ad0.png

GIL

后來,多線程編程技術流行了起來,進程里不止我一個線程了,又來了幾個新的伙伴。

本以為我們能和平共處,沒想到這一來就麻煩了,我們幾個各干各的,經常把內存空間搞出問題,也找不到背鍋的人。

終于有一天,我實在忍受不了了,召集大家商討個解決辦法。

“小伙伴們,咱們不能再這樣各搞各的了,咱們是一個Team,要彼此協作,一個線程可以走的很快,但一群線程在一起才能走的更遠吶!”

“老大,你有什么想法你就直說吧”,另一個線程說到。

“要不,咱們加個鎖吧!簡單快捷,每個線程要執行代碼,都得來申請這個鎖,申請到了才能執行,否則就得等著”,我說到。

“那什么時候釋放呢?”

“要不弄個計數器,每個線程數到100就釋放,這樣保證別人有機會來執行?”

“那怎么計數呢?每執行一個字節碼就計數一次嗎?”

“可以,不過也不用那么死板,有些指令比較簡單的,很快可以完成,就可以不用計數了”

“好是好,但要是還沒數夠100,卻在執行I/O操作阻塞了,還把鎖霸占的話,那不是資源浪費嗎?”

小伙伴們七嘴八舌的討論著。

a98d4a48-2996-11ed-ba43-dac502259ad0.png

我想了想說到:“那就這樣,把兩種情況結合一下,常規情況下數到100就釋放一次鎖,但如果遇到阻塞情況,也要提前釋放鎖,怎么樣?”

大伙紛紛點頭,達成了一致,隨后我們還給這個鎖取了一個名字:全局解釋器鎖GIL

自從用上了GIL,我們大家伙干活都規矩多了,再也沒有出現把公共資源搞壞的情況了。

升級版GIL

再后來,多核技術開始興起了,一個CPU里面可以同時執行多個線程。小伙伴們高興地把這個消息散播開了。

“老大,現在CPU有多核了,咱們可以一起執行了,可不可以把那個GIL給去掉啊,這樣才能利用多核的優勢啊。”

“是啊,隔壁Java線程老是嘲笑我們看起來人多,實際只有一個線程在執行”

可說易行難,這么多年我們都是這樣工作的,要突然去掉,出了問題誰也不敢負責啊。

“可是老大,現在這個GIL鎖不公平”,新來的線程抱怨到。

“哪里不公平了?”

“我準備執行代碼,發現鎖在你的手里,只好原地等待,等了半天都睡著了,好不容易等到你釋放了,操作系統把我給喚醒,準備去申請鎖,結果發現又被你搶到了,真是浪費表情”,新的線程滿臉委屈。

“是啊,老大,我也發現了,這不是偶發現象,我觀察很久了,經常都會發生!頻繁被喚醒,卻發現白忙活一場,白白浪費CPU資源,大家都怨氣很大啊”,另一個線程伙伴也說到。

a99c8710-2996-11ed-ba43-dac502259ad0.png

我有些不好意思,“嗯,這確實是個問題”

“還沒完呢”,新來的線程繼續說到:“現在按照字節碼指令數來統計,但有些指令碼簡單,有些很復雜,導致同樣數到100,有些線程可以運行很久,而有些就運行很快就結束了,也不公平”

小伙伴們提的問題都很重要,看來是時候對GIL進行一次升級了。

經過一陣激烈的討論,我們改進了原來對GIL,用上了新的策略:

不再用計數的方式,改用時間片的方式:每個線程的執行時間片是5000微秒。

為了保證釋放GIL后,不被自己馬上又搶到,新增了一個鎖實現強制線程切換

改進以后,這下總算公平了,各位小伙伴再也沒有話說,又可以安心的工作了。

結語

Python是一門解釋執行的語言,擁有強大的第三方庫和跨平臺能力,近幾年Python煥發了第二春,橫掃爬蟲、web開發、機器學習等眾多領域。

但長期以來,Python最為人詬病的就是它有一把鎖:GIL,這把鎖讓Python無法真正的實現多線程執行,無法利用多核CPU的高性能。

實際上,這個鎖跟Python沒有半毛錢的關系,而是負責解釋執行Python的解釋器:CPython的鍋。

CPython是用C語言編寫的Python解釋器,也是最廣為使用的Python解釋器,一般在沒有特殊說明時,說Python指的就是這個CPython解釋器。

Python誕生之初,多線程技術還遠沒有今天這么深入人心,甚至多核CPU也是Python誕生許多年后才出現的。早期的解釋器中為了支持多個線程,使用了粗暴的GIL來進行控制,方便簡單的同時,也成為了CPython的巨大歷史包袱。

Python3.2之前,Python使用簡單的計數法來統計控制每個線程執行的時間。在這之后,引入了更為公平的時間片方式來升級替換。

過去二十年,曾經有許許多多大牛都嘗試徹底去除GIL,但都沒有完美成功。

雖然Python沒能徹底去除GIL,好在,提供了其他幾種方式“曲線救國”實現并發:

Ctypes 通過編寫C語言擴展與Python交互,在C語言層面繞過GIL實現多核利用。

MultiProcess Python提供了MultiProcess,通過多進程的方式繞過GIL

協程 協程又稱用戶態線程,Python3.4版本后新增了對協程的支持,也是對性能的提升提供了一種選擇。



審核編輯:劉清

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • cpu
    cpu
    +關注

    關注

    68

    文章

    11011

    瀏覽量

    215252
  • 計數器
    +關注

    關注

    32

    文章

    2283

    瀏覽量

    95842
  • python
    +關注

    關注

    56

    文章

    4822

    瀏覽量

    85877
  • GIL
    GIL
    +關注

    關注

    0

    文章

    5

    瀏覽量

    7050

原文標題:天啦嚕!Python多線程居然是騙人的?

文章出處:【微信號:zhuyandz,微信公眾號:FPGA之家】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    光學傳感工作原理與應用

    現代科技的廣闊天地中,光學傳感如同一雙雙敏銳的“眼睛”,無處不在地捕捉著光線的信息,將其轉化為可供我們理解和分析的數字信號。從智能手機上的指紋解鎖,到自動駕駛汽車的精確導航,再到醫療領域
    的頭像 發表于 04-15 18:24 ?173次閱讀

    變送器的工作原理 變送器工業的應用

    處理技術,具體工作原理包括但不限于電阻式、電感式、電容式、電渦流式、磁電式、壓電式、光電式、磁彈性式、振頻式等。 工業應用,變送器通常作為測量系統的重要組成部分,與傳感緊密配合
    的頭像 發表于 01-31 10:04 ?1373次閱讀

    分壓工作原理

     分壓是一種電路元件,其工作原理基于歐姆定律和電壓分配法則。分壓通常由兩個或更多個電阻(或其他元件,如電容器)串聯而成,用于將輸入電壓分配到輸出端。以下是分壓
    的頭像 發表于 01-28 13:50 ?1007次閱讀

    移動電源的工作原理_移動電源結構

    移動電源的工作原理是將電能存儲在內置電池中,然后通過適當的電壓和電流輸出,為電子設備提供所需的電能。以下是關于移動電源工作原理的詳細解釋
    的頭像 發表于 01-27 16:11 ?938次閱讀

    超級電容電池的工作原理

    超級電容電池是一種介于傳統電容器與電池之間的新型儲能裝置。其工作原理主要基于電荷分離和電場存儲,以下是關于超級電容電池工作原理的詳細解釋
    的頭像 發表于 01-27 11:17 ?735次閱讀

    FDD的工作原理詳解

    工作原理的詳細解釋: 一、基本思想 FDD通過將頻譜劃分為上行和下行兩個不重疊的頻段,實現同時雙向通信。上行鏈路和下行鏈路使用兩個分開的頻率,這兩個頻率之間有一定的頻率間隔要求,以避免相互干擾。 二、核心組件 雙工 :雙工
    的頭像 發表于 01-07 17:12 ?1047次閱讀

    氣體壓力傳感工作原理解析 氣體壓力傳感工業應用的作用

    氣體壓力傳感工作原理解析 1. 壓力傳感的基本概念 壓力傳感是一種將壓力信號轉換成電信號的裝置。它可以測量絕對壓力、差壓或表壓力。
    的頭像 發表于 12-09 16:19 ?1580次閱讀

    CMOS傳感工作原理 CMOS技術相機的應用

    CMOS傳感工作原理 CMOS傳感的核心是其能夠將光信號轉換為電信號的能力。這種轉換是通過一個由光敏元件組成的陣列實現的,每個元件對應圖像的一個像素。以下是CMOS傳感
    的頭像 發表于 11-14 09:49 ?3432次閱讀

    線性傳感工作原理

    線性傳感是一種檢測裝置,其工作原理基于輸入與輸出之間成線性關系的特性。以下是對線性傳感工作原理的詳細解釋
    的頭像 發表于 10-21 16:10 ?1304次閱讀

    輔助電源的工作原理

     輔助電源的工作原理主要涉及主電源發生故障或不穩定時,自動切換到備用電源,以保證設備的持續供電。以下是關于輔助電源工作原理的詳細解釋
    的頭像 發表于 10-21 14:56 ?965次閱讀

    鋅銀電池的工作原理

    鋅銀電池的工作原理主要基于鋅和銀兩種金屬之間的氧化還原反應。以下是鋅銀電池工作原理的詳細解釋
    的頭像 發表于 10-03 14:59 ?3028次閱讀

    cmos電流反饋運放的工作原理是什么?

    這是一個cmos電流反饋型運放的原理圖 誰能詳細的解釋一下它的工作原理 具體每個mos有什么用 如何實現放大的 謝謝了
    發表于 09-23 07:40

    光耦合工作原理介紹

    電子電路設計,光耦合是一種關鍵元件,它通過光信號傳輸信息,實現電氣隔離。這種獨特的工作機制使得光耦合
    的頭像 發表于 09-14 10:37 ?1188次閱讀
    光耦合<b class='flag-5'>器</b>的<b class='flag-5'>工作原理</b>介紹

    VCO的工作原理是什么

    VCO(Voltage-Controlled Oscillator,電壓控制振蕩)的工作原理是基于電子器件的非線性特性,通過改變輸入電壓來調整輸出信號的頻率。以下是對VCO工作原理的詳細闡述,包括其電路結構、
    的頭像 發表于 08-20 17:16 ?3666次閱讀

    驅動工作原理

    驅動工作原理 驅動,又稱為執行,是將電能、氣能、液壓能等能量轉換為機械能的裝置。驅動廣泛應用于工業自動化、機器人、航空航天、汽車制
    的頭像 發表于 06-10 16:08 ?3307次閱讀
    主站蜘蛛池模板: 免费看毛片网 | 韩国美女丝袜一区二区 | 91九色麻豆 | 夜夜夜夜爽 | 美女扒开尿口给男人看大全 | 日韩欧美不卡片 | 欧美a级网站| 四虎伊人| 一本到午夜92版免费福利 | 国产 麻豆 欧美亚洲综合久久 | 国产精品高清久久久久久久 | 在线免费视频网站 | 噜噜嘿| 狠狠操狠狠 | 夜夜春色 | 色播影院性播免费看 | 四虎影院永久免费 | 欧美另类videos | 日韩一级片在线播放 | 亚洲欧洲精品成人久久曰影片 | 手机看片国产精品 | 成人精品综合免费视频 | 亚洲成人黄色网址 | 天天摸日日摸人人看 | 日韩第十页 | 免费黄色毛片 | 亚洲аv电影天堂网 | 天天好比网 | 欧美极品 | 日本三级欧美三级香港黄 | 永久免费人成网ww555kkk手机 | 欧美高清免费一级在线 | 日韩免费网站 | 久久精品国产亚洲5555 | 轻点太大了好深好爽h文 | 黄色毛片儿 | 国产免费亚洲 | 亚洲激情五月 | 乱码中文字幕人成在线 | 国产色爽女小说免费看 | 国模私拍福利一区二区 |