在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

GIL在CPython解釋器中的工作原理

FPGA之家 ? 來(lái)源:編程技術(shù)宇宙 ? 作者:軒轅之風(fēng) ? 2022-09-01 10:24 ? 次閱讀

我是一個(gè)Python線程,我的工作就是解釋執(zhí)行程序員編寫(xiě)的Python代碼。

之所以說(shuō)是解釋執(zhí)行,是因?yàn)镻ython是高級(jí)語(yǔ)言,CPU那家伙不認(rèn)識(shí)Python代碼,需要運(yùn)行的時(shí)候動(dòng)態(tài)翻譯成CPU指令。

a961259e-2996-11ed-ba43-dac502259ad0.png

我把Python源代碼經(jīng)過(guò)“編譯”以后,變成了一個(gè)個(gè)的字節(jié)碼文件:.pyc,這是一個(gè)二進(jìn)制的文件,人類(lèi)是看不懂的,只有我才能看懂。

然后我的工作就簡(jiǎn)單了,不斷的取出字節(jié)碼文件中的“指令”解釋執(zhí)行,直到所有指令都執(zhí)行完成,我就可以休息了。

a973c690-2996-11ed-ba43-dac502259ad0.png

GIL

后來(lái),多線程編程技術(shù)流行了起來(lái),進(jìn)程里不止我一個(gè)線程了,又來(lái)了幾個(gè)新的伙伴。

本以為我們能和平共處,沒(méi)想到這一來(lái)就麻煩了,我們幾個(gè)各干各的,經(jīng)常把內(nèi)存空間搞出問(wèn)題,也找不到背鍋的人。

終于有一天,我實(shí)在忍受不了了,召集大家商討個(gè)解決辦法。

“小伙伴們,咱們不能再這樣各搞各的了,咱們是一個(gè)Team,要彼此協(xié)作,一個(gè)線程可以走的很快,但一群線程在一起才能走的更遠(yuǎn)吶!”

“老大,你有什么想法你就直說(shuō)吧”,另一個(gè)線程說(shuō)到。

“要不,咱們加個(gè)鎖吧!簡(jiǎn)單快捷,每個(gè)線程要執(zhí)行代碼,都得來(lái)申請(qǐng)這個(gè)鎖,申請(qǐng)到了才能執(zhí)行,否則就得等著”,我說(shuō)到。

“那什么時(shí)候釋放呢?”

“要不弄個(gè)計(jì)數(shù)器,每個(gè)線程數(shù)到100就釋放,這樣保證別人有機(jī)會(huì)來(lái)執(zhí)行?”

“那怎么計(jì)數(shù)呢?每執(zhí)行一個(gè)字節(jié)碼就計(jì)數(shù)一次嗎?”

“可以,不過(guò)也不用那么死板,有些指令比較簡(jiǎn)單的,很快可以完成,就可以不用計(jì)數(shù)了”

“好是好,但要是還沒(méi)數(shù)夠100,卻在執(zhí)行I/O操作阻塞了,還把鎖霸占的話,那不是資源浪費(fèi)嗎?”

小伙伴們七嘴八舌的討論著。

a98d4a48-2996-11ed-ba43-dac502259ad0.png

我想了想說(shuō)到:“那就這樣,把兩種情況結(jié)合一下,常規(guī)情況下數(shù)到100就釋放一次鎖,但如果遇到阻塞情況,也要提前釋放鎖,怎么樣?”

大伙紛紛點(diǎn)頭,達(dá)成了一致,隨后我們還給這個(gè)鎖取了一個(gè)名字:全局解釋器鎖GIL

自從用上了GIL,我們大家伙干活都規(guī)矩多了,再也沒(méi)有出現(xiàn)把公共資源搞壞的情況了。

升級(jí)版GIL

再后來(lái),多核技術(shù)開(kāi)始興起了,一個(gè)CPU里面可以同時(shí)執(zhí)行多個(gè)線程。小伙伴們高興地把這個(gè)消息散播開(kāi)了。

“老大,現(xiàn)在CPU有多核了,咱們可以一起執(zhí)行了,可不可以把那個(gè)GIL給去掉啊,這樣才能利用多核的優(yōu)勢(shì)啊。”

“是啊,隔壁Java線程老是嘲笑我們看起來(lái)人多,實(shí)際只有一個(gè)線程在執(zhí)行”

可說(shuō)易行難,這么多年我們都是這樣工作的,要突然去掉,出了問(wèn)題誰(shuí)也不敢負(fù)責(zé)啊。

“可是老大,現(xiàn)在這個(gè)GIL鎖不公平”,新來(lái)的線程抱怨到。

“哪里不公平了?”

“我準(zhǔn)備執(zhí)行代碼,發(fā)現(xiàn)鎖在你的手里,只好原地等待,等了半天都睡著了,好不容易等到你釋放了,操作系統(tǒng)把我給喚醒,準(zhǔn)備去申請(qǐng)鎖,結(jié)果發(fā)現(xiàn)又被你搶到了,真是浪費(fèi)表情”,新的線程滿臉委屈。

“是啊,老大,我也發(fā)現(xiàn)了,這不是偶發(fā)現(xiàn)象,我觀察很久了,經(jīng)常都會(huì)發(fā)生!頻繁被喚醒,卻發(fā)現(xiàn)白忙活一場(chǎng),白白浪費(fèi)CPU資源,大家都怨氣很大啊”,另一個(gè)線程伙伴也說(shuō)到。

a99c8710-2996-11ed-ba43-dac502259ad0.png

我有些不好意思,“嗯,這確實(shí)是個(gè)問(wèn)題”

“還沒(méi)完呢”,新來(lái)的線程繼續(xù)說(shuō)到:“現(xiàn)在按照字節(jié)碼指令數(shù)來(lái)統(tǒng)計(jì),但有些指令碼簡(jiǎn)單,有些很復(fù)雜,導(dǎo)致同樣數(shù)到100,有些線程可以運(yùn)行很久,而有些就運(yùn)行很快就結(jié)束了,也不公平”

小伙伴們提的問(wèn)題都很重要,看來(lái)是時(shí)候?qū)IL進(jìn)行一次升級(jí)了。

經(jīng)過(guò)一陣激烈的討論,我們改進(jìn)了原來(lái)對(duì)GIL,用上了新的策略:

不再用計(jì)數(shù)的方式,改用時(shí)間片的方式:每個(gè)線程的執(zhí)行時(shí)間片是5000微秒。

為了保證釋放GIL后,不被自己馬上又搶到,新增了一個(gè)鎖實(shí)現(xiàn)強(qiáng)制線程切換

改進(jìn)以后,這下總算公平了,各位小伙伴再也沒(méi)有話說(shuō),又可以安心的工作了。

結(jié)語(yǔ)

Python是一門(mén)解釋執(zhí)行的語(yǔ)言,擁有強(qiáng)大的第三方庫(kù)和跨平臺(tái)能力,近幾年P(guān)ython煥發(fā)了第二春,橫掃爬蟲(chóng)、web開(kāi)發(fā)、機(jī)器學(xué)習(xí)等眾多領(lǐng)域。

但長(zhǎng)期以來(lái),Python最為人詬病的就是它有一把鎖:GIL,這把鎖讓Python無(wú)法真正的實(shí)現(xiàn)多線程執(zhí)行,無(wú)法利用多核CPU的高性能。

實(shí)際上,這個(gè)鎖跟Python沒(méi)有半毛錢(qián)的關(guān)系,而是負(fù)責(zé)解釋執(zhí)行Python的解釋器:CPython的鍋。

CPython是用C語(yǔ)言編寫(xiě)的Python解釋器,也是最廣為使用的Python解釋器,一般在沒(méi)有特殊說(shuō)明時(shí),說(shuō)Python指的就是這個(gè)CPython解釋器。

Python誕生之初,多線程技術(shù)還遠(yuǎn)沒(méi)有今天這么深入人心,甚至多核CPU也是Python誕生許多年后才出現(xiàn)的。早期的解釋器中為了支持多個(gè)線程,使用了粗暴的GIL來(lái)進(jìn)行控制,方便簡(jiǎn)單的同時(shí),也成為了CPython的巨大歷史包袱。

Python3.2之前,Python使用簡(jiǎn)單的計(jì)數(shù)法來(lái)統(tǒng)計(jì)控制每個(gè)線程執(zhí)行的時(shí)間。在這之后,引入了更為公平的時(shí)間片方式來(lái)升級(jí)替換。

過(guò)去二十年,曾經(jīng)有許許多多大牛都嘗試徹底去除GIL,但都沒(méi)有完美成功。

雖然Python沒(méi)能徹底去除GIL,好在,提供了其他幾種方式“曲線救國(guó)”實(shí)現(xiàn)并發(fā):

Ctypes 通過(guò)編寫(xiě)C語(yǔ)言擴(kuò)展與Python交互,在C語(yǔ)言層面繞過(guò)GIL實(shí)現(xiàn)多核利用。

MultiProcess Python提供了MultiProcess,通過(guò)多進(jìn)程的方式繞過(guò)GIL

協(xié)程 協(xié)程又稱用戶態(tài)線程,Python3.4版本后新增了對(duì)協(xié)程的支持,也是對(duì)性能的提升提供了一種選擇。



審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • cpu
    cpu
    +關(guān)注

    關(guān)注

    68

    文章

    10891

    瀏覽量

    212455
  • 計(jì)數(shù)器
    +關(guān)注

    關(guān)注

    32

    文章

    2259

    瀏覽量

    94823
  • python
    +關(guān)注

    關(guān)注

    56

    文章

    4802

    瀏覽量

    84890
  • GIL
    GIL
    +關(guān)注

    關(guān)注

    0

    文章

    5

    瀏覽量

    7005

原文標(biāo)題:天啦嚕!Python多線程居然是騙人的?

文章出處:【微信號(hào):zhuyandz,微信公眾號(hào):FPGA之家】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    FDD的工作原理詳解

    工作原理的詳細(xì)解釋: 一、基本思想 FDD通過(guò)將頻譜劃分為上行和下行兩個(gè)不重疊的頻段,實(shí)現(xiàn)同時(shí)雙向通信。上行鏈路和下行鏈路使用兩個(gè)分開(kāi)的頻率,這兩個(gè)頻率之間有一定的頻率間隔要求,以避免相互干擾。 二、核心組件 雙工 :雙工
    的頭像 發(fā)表于 01-07 17:12 ?197次閱讀

    氣體壓力傳感工作原理解析 氣體壓力傳感工業(yè)應(yīng)用的作用

    氣體壓力傳感工作原理解析 1. 壓力傳感的基本概念 壓力傳感是一種將壓力信號(hào)轉(zhuǎn)換成電信號(hào)的裝置。它可以測(cè)量絕對(duì)壓力、差壓或表壓力。
    的頭像 發(fā)表于 12-09 16:19 ?580次閱讀

    CMOS傳感工作原理 CMOS技術(shù)相機(jī)的應(yīng)用

    CMOS傳感工作原理 CMOS傳感的核心是其能夠?qū)⒐庑盘?hào)轉(zhuǎn)換為電信號(hào)的能力。這種轉(zhuǎn)換是通過(guò)一個(gè)由光敏元件組成的陣列實(shí)現(xiàn)的,每個(gè)元件對(duì)應(yīng)圖像的一個(gè)像素。以下是CMOS傳感
    的頭像 發(fā)表于 11-14 09:49 ?1684次閱讀

    線性傳感工作原理

    線性傳感是一種檢測(cè)裝置,其工作原理基于輸入與輸出之間成線性關(guān)系的特性。以下是對(duì)線性傳感工作原理的詳細(xì)解釋
    的頭像 發(fā)表于 10-21 16:10 ?694次閱讀

    輔助電源的工作原理

     輔助電源的工作原理主要涉及主電源發(fā)生故障或不穩(wěn)定時(shí),自動(dòng)切換到備用電源,以保證設(shè)備的持續(xù)供電。以下是關(guān)于輔助電源工作原理的詳細(xì)解釋
    的頭像 發(fā)表于 10-21 14:56 ?498次閱讀

    鋅銀電池的工作原理

    鋅銀電池的工作原理主要基于鋅和銀兩種金屬之間的氧化還原反應(yīng)。以下是鋅銀電池工作原理的詳細(xì)解釋
    的頭像 發(fā)表于 10-03 14:59 ?1630次閱讀

    cmos電流反饋運(yùn)放的工作原理是什么?

    這是一個(gè)cmos電流反饋型運(yùn)放的原理圖 誰(shuí)能詳細(xì)的解釋一下它的工作原理 具體每個(gè)mos有什么用 如何實(shí)現(xiàn)放大的 謝謝了
    發(fā)表于 09-23 07:40

    光耦合工作原理介紹

    電子電路設(shè)計(jì),光耦合是一種關(guān)鍵元件,它通過(guò)光信號(hào)傳輸信息,實(shí)現(xiàn)電氣隔離。這種獨(dú)特的工作機(jī)制使得光耦合
    的頭像 發(fā)表于 09-14 10:37 ?744次閱讀
    光耦合<b class='flag-5'>器</b>的<b class='flag-5'>工作原理</b>介紹

    壓敏電阻開(kāi)關(guān)電源工作原理

    壓敏電阻(Varistor)是一種非線性電阻元件,其電阻值隨著電壓的增加而急劇減小。開(kāi)關(guān)電源,壓敏電阻主要用于保護(hù)電路免受電壓尖峰和浪涌電流的損害。 1. 壓敏電阻的基本特性 壓敏電阻的主要材料
    的頭像 發(fā)表于 09-06 09:10 ?835次閱讀

    VCO的工作原理是什么

    VCO(Voltage-Controlled Oscillator,電壓控制振蕩)的工作原理是基于電子器件的非線性特性,通過(guò)改變輸入電壓來(lái)調(diào)整輸出信號(hào)的頻率。以下是對(duì)VCO工作原理的詳細(xì)闡述,包括其電路結(jié)構(gòu)、
    的頭像 發(fā)表于 08-20 17:16 ?2317次閱讀

    驅(qū)動(dòng)工作原理

    驅(qū)動(dòng)工作原理 驅(qū)動(dòng),又稱為執(zhí)行,是將電能、氣能、液壓能等能量轉(zhuǎn)換為機(jī)械能的裝置。驅(qū)動(dòng)廣泛應(yīng)用于工業(yè)自動(dòng)化、機(jī)器人、航空航天、汽車(chē)制
    的頭像 發(fā)表于 06-10 16:08 ?2437次閱讀

    信號(hào)發(fā)生工作原理

    信號(hào)發(fā)生工作原理主要是基于電路的振蕩和放大器來(lái)產(chǎn)生、調(diào)整和輸出所需的電信號(hào)。
    的頭像 發(fā)表于 05-07 15:39 ?1606次閱讀

    磁阻效應(yīng)傳感工作原理

    傳感工作原理。 首先,需要了解一些基礎(chǔ)概念。材料中,電子具有自旋和電荷兩個(gè)性質(zhì)。自旋是量子力學(xué)的一個(gè)概念,指的是電子自身固有的旋轉(zhuǎn)角動(dòng)量。磁性材料的原子內(nèi)部的電子
    的頭像 發(fā)表于 03-06 15:54 ?1816次閱讀

    電壓比較工作原理 電壓比較的集成運(yùn)放工作什么區(qū)

    電壓比較(Voltage Comparator)是一種基本的電子器件,廣泛應(yīng)用于模擬電路和數(shù)字電路。它可以比較兩個(gè)輸入電壓的大小,并輸出一個(gè)與比較結(jié)果相關(guān)的電壓信號(hào)。比較工作原理
    的頭像 發(fā)表于 02-20 17:46 ?4351次閱讀

    數(shù)字電位的基本工作原理 數(shù)字電位電路的作用

    至關(guān)重要的作用,可以用于音頻控制、亮度調(diào)節(jié)、電壓調(diào)節(jié)等許多應(yīng)用。本文將詳細(xì)解釋數(shù)字電位工作原理,并介紹其電路
    的頭像 發(fā)表于 02-02 13:51 ?5317次閱讀
    數(shù)字電位<b class='flag-5'>器</b>的基本<b class='flag-5'>工作原理</b> 數(shù)字電位<b class='flag-5'>器</b><b class='flag-5'>在</b>電路<b class='flag-5'>中</b>的作用
    主站蜘蛛池模板: 欧美特级黄| 在线欧美三级| freesex性欧美重口| 色aaa| www.av免费| h视频在线看| 亚洲视频在线观看一区| 午夜高清视频| 国产一区二区三区美女图片| 色综合久久久久久久久五月性色| 四虎精品成在线播放| 日韩欧美一级| 久久伊人男人的天堂网站| 国产视频二区| 国内精品久久久久影院薰衣草| 激情欧美一区二区三区中文字幕| 国产精品免费拍拍拍| 亚洲黄色一区| 国产综合在线播放| 狂野欧美性猛交xxxx免费| 免费大片黄在线观看| 亚偷熟乱区视频在线观看| 永久在线观看www免费视频| 中文字幕第一| 狼狼鲁狼狼色| 黄视频网站免费| 色综合久久久久久久久五月性色| 免费亚洲成人| 久久性| 六月天婷婷| 在线免费看高清视频大全| 久久草在线看| 亚洲国产欧美在线人成aaa| 亚洲午夜久久久久久噜噜噜| 欧美一级欧美三级| 97影院理论片在线观看| 久久亚洲精选| 成人午夜大片免费视频77777| 国产未成女年一区二区| 一区二区三区视频| 新版天堂中文网|