色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

CPU緩存一致性原理

sakobpqhz6 ? 來源:平凡人筆記 ? 2023-03-15 09:09 ? 次閱讀

cpu速度和內(nèi)存速度比值,目前比值是100:1的關(guān)系,一個做計算的,一個做存儲,相互之間怎么比速度?

這個速度是指:cpu內(nèi)部的ALU計算單元訪問內(nèi)部的寄存器,如果耗時是1個納秒,計算單元通過數(shù)據(jù)總線去訪問內(nèi)存需要100納秒,這個速度是指訪問某個寄存器的速度并不是計算的速度,ALU訪問寄存器的速度比訪問內(nèi)存的速度快100倍。

為什么ALU訪問寄存器的速度快,因為ALU和寄存器離的近。

內(nèi)存中有一個數(shù)組,訪問數(shù)組中第一個元素數(shù)據(jù)需要100納秒,訪問第二個數(shù)據(jù)100納秒,所以cpu至少有99個時間單元都得等著從內(nèi)存中返回數(shù)據(jù)給ALU使用。

為了充分利用cpu的速度,一般往往在中間設(shè)計緩存的存在,cpu訪問緩存的速度比訪問內(nèi)存的速度要快。

訪問數(shù)組中第一個數(shù)據(jù)的時候,把整個數(shù)組放到緩存中來,下次cpu訪問的時候從緩存中訪問。

不要內(nèi)存完全可以,但工業(yè)上需要考慮一個性價比,數(shù)據(jù)都放在寄存器中太貴了,8個G的內(nèi)存400塊錢,8個G的寄存器40萬,寄存器稍微貴一點點的、容量稍微小一點的還可以承受,比如8個G的內(nèi)存,1個G的寄存器。

不是所有的數(shù)據(jù)都放在寄存器中,在這里有專門的算法LRU(Least Recently Used 淘汰最近未使用的)或LFU(least frequently used淘汰不經(jīng)常使用的),這個算法決定著什么樣的數(shù)據(jù)挪過來,什么樣的數(shù)據(jù)挪出去。

緩存是均衡的設(shè)計,在省錢和讀取、寫入的效率之間均衡。加了一層緩存之后,發(fā)現(xiàn)cpu到這個緩存之間的速度還是慢很多,再加一層,

c747b632-c2ab-11ed-bfe3-dac502259ad0.png

三級緩存是工業(yè)實現(xiàn)中的一個妥協(xié),也許不久的將來,cpu的速度超級快,可能需要四層緩存或內(nèi)存的速度快很多,也許就一層緩存,目前的工業(yè)實踐,多采用三級緩存的結(jié)構(gòu)。

線程和cpu之間的關(guān)系密不可分,一顆cpu在同一個時間只能執(zhí)行一個線程,cpu的計算也代表著線程的計算。

多核CPU

c79f6bfc-c2ab-11ed-bfe3-dac502259ad0.png

這是一顆cpu,在cpu內(nèi)部往往有多個核存在,每一個核都有自己的ALU、寄存器、程序計數(shù)器,一級緩存和二級緩存都在這個核里,三級緩存是多個核共享。

ALU的計算單元需要把讀到的數(shù)據(jù)放到寄存器,寄存器會去尋找想要的數(shù)據(jù),首先去一級緩存找,沒有的話,再去二級緩存找,還沒有的話,再去三級緩存找,三級緩存把數(shù)據(jù)傳給二級緩存,二級緩存把數(shù)據(jù)傳給一級緩存,一級緩存把數(shù)據(jù)傳給寄存器,下一次再訪問數(shù)據(jù)的時候直接去一級緩存中拿。

超線程

c7b92c2c-c2ab-11ed-bfe3-dac502259ad0.png

雖然只有一個計算單元ALU,但是有2套存儲單元、2套寄存器、2套程序計數(shù)器,一個核可以裝2個線程的數(shù)據(jù)進來,計算單元輪著計算,2個線程就不需要來回切換了,即一個核2個線程,2個核4個線程,4個核8個線程。

c7e2a89a-c2ab-11ed-bfe3-dac502259ad0.png

需要訪問內(nèi)存中某個數(shù)組中的第一個元素數(shù)據(jù),先在一級緩存找,再找二級、三級,都沒有的話,去內(nèi)存中找,內(nèi)存中找到之后,返回給三級緩存、二級緩存、一級緩存,最后再給到寄存器, ALU做計算的時候就可以直接訪問寄存器獲取數(shù)據(jù)了。

站在計算單元的角度,訪問數(shù)組中第一個元素數(shù)據(jù)很可能會訪問第二個元素數(shù)據(jù),如果第二個元素數(shù)據(jù)也沒有,同樣的方式又得來一遍,那這樣的話還不如直接從內(nèi)存讀呢!

緩存行

當(dāng)要訪問一個數(shù)據(jù)的時候,干脆每一次緩存一小塊的數(shù)據(jù),這一小塊數(shù)據(jù)里面包含了整個數(shù)組的數(shù)據(jù),當(dāng)訪問數(shù)組中的任意元素數(shù)據(jù)的時候,就可以直接從緩存中讀取到了,這一塊的數(shù)據(jù)被稱為緩存行。

這個理論被稱為程序的局部性原理,而局部性原理分為空間局部性和時間局部性。

根據(jù)大多數(shù)工業(yè)證明,在訪問局部數(shù)據(jù)的時候,會很快的訪問相鄰的數(shù)據(jù),這就是空間局部性。

時間局部性是執(zhí)行完這條指令之后,很可能執(zhí)行和它挨著的下一條指令,如果指令也看做是一份二進制0101數(shù)據(jù)的話,也可以一次性的把很多指令讀取過來。

緩存行數(shù)據(jù)是大了好還是小了好?

如果這一行數(shù)據(jù)特別大,一次性可以放好多數(shù)據(jù)過來,好處就是訪問的時候命中率會更高,但是每讀一塊數(shù)據(jù)過來效率會很低;數(shù)據(jù)小的話,讀起來速度會很快但命中率會較低。

目前計算機多采用64個字節(jié)(64*8bit)為一緩存行數(shù)據(jù)。

緩存行對齊,偽共享

c814d73e-c2ab-11ed-bfe3-dac502259ad0.png

創(chuàng)建一個數(shù)組,里面存放了2個T類對象元素,T類中有一個long類型的x字段,long類型長度是8個bytes。

2個線程,意味著有2顆cpu在同時運行,第一個線程玩命的修改數(shù)組中的第一個元素t1,改了10億次,第二個線程玩命的修改數(shù)組中的第二個元素t2,也改了10億次,總共耗時700多毫秒。

對T類做了修改,c8455e40-c2ab-11ed-bfe3-dac502259ad0.png

因為一個緩存行大小為64字節(jié),所以在屬性x前面加了7個屬性(7*8字節(jié)=56個字節(jié)),加上x共64個字節(jié),x后面也加了56個字節(jié),正好將一個x值,放在一個緩存行里,計算結(jié)果耗時240多毫秒,數(shù)據(jù)越多執(zhí)行效率反而越高了。在介紹原理之前,先介紹下緩存一致性協(xié)議,

緩存一致性協(xié)議

c85c31a6-c2ab-11ed-bfe3-dac502259ad0.png

假設(shè)有2個數(shù)據(jù)x、y位于同一緩存行,在第一個計算單元(cpu或線程)里面只使用了x,第二個線程里面只使用了y,雖然在內(nèi)存中是同一份數(shù)據(jù),但是到緩存之后,是2份拷貝數(shù)據(jù),每一個用到它的cpu都會有它的一份拷貝存在,一個cpu對這份數(shù)據(jù)做了修改之后,另外cpu也需要同步到最新的數(shù)據(jù)。

有了緩存的概念,必須要保證緩存的數(shù)據(jù)一致性即緩存一致性協(xié)議,每種cpu廠商都有自己完全不同的緩存一致性協(xié)議,常見的是MESI(因特爾的緩存一致性協(xié)議),這是緩存一致性協(xié)議的一種實現(xiàn)。

cpu每個緩存行標(biāo)記有4種狀態(tài):Modified(被修改),Exclusive(獨占)、Shared(共享)、Invalid(無效)。

一個cpu將一個緩存行中的數(shù)據(jù)修改了,需要一種機制:通知使用該緩存行的其他cpu數(shù)據(jù)已失效,需要重新再讀取一遍,獲取最新修改的數(shù)據(jù)。

有些無法被緩存的數(shù)據(jù),比如一份的數(shù)據(jù)超過了64個字節(jié),則需要使用總線鎖。

再回到上面的那個問題,為什么數(shù)據(jù)越多執(zhí)行效率反而越高了?

一個long類型的x是8個字節(jié),這2個x位于同一個緩存行的概率極大(尤其這2個x位于同一個數(shù)組,在內(nèi)存中是挨著的),2個cpu分別修改一個x,2個x在一方cpu都有緩存,修改了其中一個需要通知另外一個,每改一次通知一下,總之在修改的時候需要觸發(fā)一種機制需要另外的cpu跟我保持一致,如果這樣的話,耗時當(dāng)然會比較長。

在x前后加56個字節(jié),無論怎么刷新緩存,這個x都不會和另外一個x位于同一緩存行,這意味著這個cpu修改了第一個x的時候,是不需要通知任何其他cpu的,第二個cpu修改第二個x的時候,也是不需要通知第一個cpu的,速度一定會很快。

jdk 7寫的LinkedBlockQueue也是這種寫法或者獲得杜克獎的開源軟件Disruptor中的環(huán)形隊列也是這種寫法,

c887fd7c-c2ab-11ed-bfe3-dac502259ad0.png

Disruptor(環(huán)形隊列)號稱是最快的單機mq;實現(xiàn)鏈表一般需要2個指針,一個是頭指針,一個是尾指針,而這個環(huán)形隊列,只要有一個指針就可以了,

c8c2bbce-c2ab-11ed-bfe3-dac502259ad0.png

指針指向這個位置就往這存,指向下個位置就往下一個位置存,什么時候存滿了,就等著最開始存的那個被消費走,消費走了繼續(xù)往這里存,一個指針來回轉(zhuǎn),速度非常快。

由于有多個生產(chǎn)者和多個消費者,在多線程的情況下這個環(huán)形的指針就會被多個線程讀到自己的緩存里,

c8cfa438-c2ab-11ed-bfe3-dac502259ad0.png

第一個屬性是起始值,后面是7個無業(yè)務(wù)含義的數(shù)據(jù),其存在的目的是可以保證p1屬性往后組合的時候不會和別的p1屬性位于同一個緩存行。

但是說不準(zhǔn)會往前面組合呢即為什么沒有前面的7個呢?也是有的,在父類的父類中定義的,

c9885bd6-c2ab-11ed-bfe3-dac502259ad0.png

c9abe312-c2ab-11ed-bfe3-dac502259ad0.png

數(shù)組中前連續(xù)的2個元素是2個RingBuffer對象,一個對象所占用的字節(jié)57+8+56,所以可以確保一個緩存行中只有一個元素,那么在多線程的情況下對不同元素的修改不會互相通知,互相影響。

以上便是cpu級別的并發(fā)控制之緩存一致性的描述。

審核編輯:湯梓紅

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 寄存器
    +關(guān)注

    關(guān)注

    31

    文章

    5357

    瀏覽量

    120689
  • cpu
    cpu
    +關(guān)注

    關(guān)注

    68

    文章

    10882

    瀏覽量

    212229
  • 存儲
    +關(guān)注

    關(guān)注

    13

    文章

    4332

    瀏覽量

    85954
  • 緩存
    +關(guān)注

    關(guān)注

    1

    文章

    240

    瀏覽量

    26702
  • 線程
    +關(guān)注

    關(guān)注

    0

    文章

    505

    瀏覽量

    19709

原文標(biāo)題:CPU緩存一致性原理

文章出處:【微信號:IC學(xué)習(xí),微信公眾號:IC學(xué)習(xí)】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    如何解決數(shù)據(jù)庫與緩存一致性

    緩存一致性 每次逢年過節(jié)的時候搶票非常艱難,放票的時候那么多人同時去搶票,如果所有人查詢、購票等都去訪問數(shù)據(jù)庫,那數(shù)據(jù)庫的壓力得有多大,這時候很多都會引入緩存, 把車票信息放入緩存,這
    的頭像 發(fā)表于 09-25 15:25 ?1127次閱讀
    如何解決數(shù)據(jù)庫與<b class='flag-5'>緩存</b><b class='flag-5'>一致性</b>

    #硬聲創(chuàng)作季 【JMM底層】CPU緩存一致性協(xié)議剖析

    JAVA緩存編程語言
    Mr_haohao
    發(fā)布于 :2022年09月14日 06:59:51

    小編科普CPU緩存一致性協(xié)議MESI

    什么是緩存一致性協(xié)議MESI?MESI協(xié)議中的狀態(tài)有哪幾種?MESI協(xié)議中的狀態(tài)是如何相互轉(zhuǎn)換的?
    發(fā)表于 06-17 10:00

    一致性規(guī)劃研究

    針對一致性規(guī)劃的高度求解復(fù)雜度,分析主流一致性規(guī)劃器的求解策略,給出影響一致性規(guī)劃器性能的主要因素:啟發(fā)信息的有效,信念狀態(tài)表示方法的緊湊
    發(fā)表于 04-06 08:43 ?12次下載

    加速器一致性接口

    提供異步緩存一致性直接訪問PS的入口。處理器可以標(biāo)記ACP上的傳輸為一致性或非一致性。PL端的AXI主機通過ARUSERS[1:0]指示是否為一致性
    發(fā)表于 11-17 15:04 ?3700次閱讀

    Cache一致性協(xié)議優(yōu)化研究

    問題的由來.總結(jié)了多核時代高速緩存一致性協(xié)議設(shè)計的關(guān)鍵問題,綜述了近年來學(xué)術(shù)界對一致性的研究.從程序訪存行為模式、目錄組織結(jié)構(gòu)、一致性粒度、一致性
    發(fā)表于 12-30 15:04 ?0次下載
    Cache<b class='flag-5'>一致性</b>協(xié)議優(yōu)化研究

    自主駕駛系統(tǒng)將使用緩存一致性互連IP和非一致性互連IP

    代ASIL B(D)自主駕駛系統(tǒng)將使用符合ISO 26262標(biāo)準(zhǔn)的緩存一致性互連IP和非一致性互連IP來實現(xiàn)。 美國加利福尼亞州坎貝爾2019年4月26日消息—Arteris IP
    的頭像 發(fā)表于 05-09 17:13 ?3239次閱讀

    管理基于Cortex?-M7的MCU的高速緩存一致性

    本文檔概述了不同場景下的高速緩存一致性問題,并就如何管理或避免高速緩存一致性問題提供了些方法建議。
    發(fā)表于 04-01 10:12 ?5次下載
    管理基于Cortex?-M7的MCU的高速<b class='flag-5'>緩存</b><b class='flag-5'>一致性</b>

    CPU緩存一致性協(xié)議MESI詳解

    CPU在摩爾定律的指導(dǎo)下以每18個月翻番的速度在發(fā)展,然而內(nèi)存和硬盤的發(fā)展速度遠遠不及CPU。這就造成了高性能能的內(nèi)存和硬盤價格及其昂貴。然而CPU的高度運算需要高速的數(shù)據(jù)。為了解決
    的頭像 發(fā)表于 05-12 17:36 ?4378次閱讀
    <b class='flag-5'>CPU</b><b class='flag-5'>緩存</b><b class='flag-5'>一致性</b>協(xié)議MESI詳解

    CPU緩存一致性協(xié)議MESI介紹

    CPU在摩爾定律的指導(dǎo)下以每18個月翻番的速度在發(fā)展,然而內(nèi)存和硬盤的發(fā)展速度遠遠不及CPU。這就造成了高性能能的內(nèi)存和硬盤價格及其昂貴。
    的頭像 發(fā)表于 06-09 10:39 ?914次閱讀
    <b class='flag-5'>CPU</b><b class='flag-5'>緩存</b><b class='flag-5'>一致性</b>協(xié)議MESI介紹

    介紹下cpu緩存一致性(MESI協(xié)議)

    之前介紹了java并發(fā)包的cas原理和java內(nèi)存模型,這篇我們介紹下cpu緩存一致性原理,可以幫助我們更好的理解cas的底層原理。
    的頭像 發(fā)表于 06-09 16:01 ?4710次閱讀
    介紹下<b class='flag-5'>cpu</b><b class='flag-5'>緩存</b><b class='flag-5'>一致性</b>(MESI協(xié)議)

    CPU緩存一致性協(xié)議解析

    CPU運行效率高不高,定程度取決于緩存,這里就給大家分享CPU緩存相關(guān)的內(nèi)容。
    的頭像 發(fā)表于 07-12 10:07 ?853次閱讀
    <b class='flag-5'>CPU</b><b class='flag-5'>緩存</b><b class='flag-5'>一致性</b>協(xié)議解析

    如何保證緩存一致性

    “ 本文的參考文章是2022年HOT 34上Intel Rob Blakenship關(guān)于CXL緩存一致性篇介紹。”
    的頭像 發(fā)表于 10-19 17:42 ?1151次閱讀
    如何保證<b class='flag-5'>緩存</b><b class='flag-5'>一致性</b>

    Redis緩存與Mysql如何保證一致性

    基本流程就是客戶端A請求,先去刪除緩存,然后將數(shù)據(jù)寫入數(shù)據(jù)庫,此時客戶端B查詢先去查詢緩存緩存沒有返回,去查數(shù)據(jù)庫,此時還沒有完成主從同步,拿到是從庫的舊數(shù)據(jù),然后將舊數(shù)據(jù)進行緩存
    的頭像 發(fā)表于 12-02 14:23 ?942次閱讀
    Redis<b class='flag-5'>緩存</b>與Mysql如何保證<b class='flag-5'>一致性</b>?

    異構(gòu)計算下緩存一致性的重要

    在眾多回復(fù)中,李博杰同學(xué)的回答被認為質(zhì)量最高。他首先將緩存一致性分為兩個主要場景:是主機內(nèi)CPU與設(shè)備間的一致性;二是跨主機的
    的頭像 發(fā)表于 10-24 17:00 ?652次閱讀
    異構(gòu)計算下<b class='flag-5'>緩存</b><b class='flag-5'>一致性</b>的重要<b class='flag-5'>性</b>
    主站蜘蛛池模板: 色多多污污在线观看网站| 全彩acg无翼乌火影忍者| xxx性欧美在线| 在线亚洲专区中文字幕| 亚洲精品成人无码区一在线观看| 日产2021免费一二三四区在线| 欧美成人性色生活18黑人| 毛片大片免费看| 伦理片 a在线线版韩国| 牢记永久免费网址| 久久久久亚洲精品影视| 久久九九精品国产自在现线拍| 黑人操白逼| 娇小XXXXX第一次出血| 果冻传媒AV精品一区| 好大太快了快插穿子宫了| 海角国精产品一区一区三区糖心| 国产一区二区高清| 黑丝美女娇喘| 久久精品免费观看久久| 久久热这里只有 精品| 空姐厕所啪啪啪| 免费视频网站嗯啊轻点| 强奷表妺好紧2| 日韩欧美高清一区| 天天久久狠狠色综合| 小黄飞二人转| 亚洲免费视频在线| 在线观看视频中文字幕| 2017年伦理片免费观看| 99热久久爱五月天婷婷| 大胆国模一区二区三区伊人| 国产精品18久久久久久欧美网址 | 久久精品视频15人人爱在线直播| 久久国产精品永久免费网站| 麻豆第一区MV免费观看网站 | 99在线精品国自产拍| 白嫩美女直冒白浆| 国产精品一区第二页| 精品久久久久久久久免费影院| 久久综合狠狠综合狠狠|