在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

高性能緩存設計:如何解決緩存?zhèn)喂蚕韱栴}

京東云 ? 來源:jf_75140285 ? 作者:jf_75140285 ? 2025-07-01 15:01 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

在多核高并發(fā)場景下,緩存?zhèn)喂蚕恚‵alse Sharing) 是導致性能驟降的“隱形殺手”。當不同線程頻繁修改同一緩存行(Cache Line)中的獨立變量時,CPU緩存一致性協(xié)議會強制同步整個緩存行,引發(fā)無效化風暴,使看似無關的變量操作拖慢整體效率。本文從緩存結(jié)構原理出發(fā),通過實驗代碼復現(xiàn)偽共享問題(耗時從3709ms優(yōu)化至473ms),解析其底層機制;同時深入剖析高性能緩存庫 Caffeine 如何通過 內(nèi)存填充技術(120字節(jié)占位變量)隔離關鍵字段,以及 JDK 1.8 的 @Contended 注解如何以“空間換時間”策略高效解決偽共享問題,揭示緩存一致性優(yōu)化的核心思想與實踐價值,為開發(fā)者提供性能調(diào)優(yōu)的關鍵思路。

偽共享

偽共享(False sharing)是一種會導致性能下降的使用模式,最常見于現(xiàn)代多處理器CPU緩存中。當不同線程頻繁修改同一緩存行(Cache Line)中不同變量時,由于CPU緩存一致性協(xié)議(如MESI)會強制同步整個緩存行,導致線程間無實際數(shù)據(jù)競爭的邏輯變量被迫觸發(fā)緩存行無效化(Invalidation),引發(fā)頻繁的內(nèi)存訪問和性能下降。盡管這些變量在代碼層面彼此獨立,但因物理內(nèi)存布局相鄰,共享同一緩存行,造成“虛假競爭”,需通過內(nèi)存填充或字段隔離使其獨占緩存行解決。

接下來我們討論并驗證在 CPU 緩存中是如何發(fā)生偽共享問題的,首先我們需要先介紹一下 CPU 的緩存結(jié)構,如下圖所示:

wKgZPGhiYXSAWBAQAAKTcpGKIOw367.png

CPU Cache 通常分為大小不等的三級緩存,分別為 L1 Cache、L2 Cache、L3 Cache,越靠近 CPU 的緩存,速度越快,容量也越小。CPU Cache 實際上由很多個緩存行 Cache Line 組成,通常它的大小為 64 字節(jié)(或 128 字節(jié)),是 CPU 從內(nèi)存中 讀取數(shù)據(jù)的基本單位,如果訪問一個 long[] 數(shù)組,當其中一個值被加載到緩存中時,它會額外加載另外 7 個元素到緩存中。那么我們考慮這樣一種情況,CPU 的兩個核心分別訪問和修改統(tǒng)一緩存行中的數(shù)據(jù),如下圖所示:

wKgZO2hiYXWAX1oFAAI12kQOkt8607.png

核心 1 不斷地訪問和更新值 X,核心 2 則不斷地訪問和更新值 Y,事實上每當有核心對某一緩存行中的數(shù)據(jù)進行修改時,都會導致其他核心的緩存行失效,從而導致其他核心需要重新加載緩存行數(shù)據(jù),進而導致性能下降,這也就是我們上文中所說的緩存?zhèn)喂蚕韱栴}。接下來我們用一段代碼來驗證下緩存?zhèn)喂蚕韱栴}造成的性能損失,如下所示:

public class TestFalseSharing {

    static class Pointer {
        // 兩個 volatile 變量,保證可見性
        volatile long x;
        volatile long y;

        @Override
        public String toString() {
            return "x=" + x + ", y=" + y;
        }
    }

    @Test
    public void testFalseSharing() throws InterruptedException {
        Pointer pointer = new Pointer();

        // 啟動兩個線程,分別對 x 和 y 進行自增 1億 次的操作
        long start = System.currentTimeMillis();
        Thread t1 = new Thread(() -> {
            for (int i = 0; i < 100_000_000; i++) {
                pointer.x++;
            }
        });
        Thread t2 = new Thread(() -?> {
            for (int i = 0; i < 100_000_000; i++) {
                pointer.y++;
            }
        });

        t1.start();
        t2.start();
        t1.join();
        t2.join();

        System.out.println(System.currentTimeMillis() - start);
        System.out.println(pointer);
    }

}

這種情況下會發(fā)生緩存的偽共享,x 和 y 被加載到同一緩存行中,當其中一個值被修改時,會使另一個核心中的該緩存行失效并重新加載,代碼執(zhí)行實際耗時為 3709ms。如果我們將 x 變量后再添加上 7 個 long 型的元素,使得變量 x 和變量 y 分配到不同的緩存行中,那么理論上性能將得到提升,我們實驗一下:

public class TestFalseSharing {

    static class Pointer {
        volatile long x;
        long p1, p2, p3, p4, p5, p6, p7;
        volatile long y;

        @Override
        public String toString() {
            return "x=" + x + ", y=" + y;
        }
    }

    @Test
    public void testFalseSharing() throws InterruptedException {
        // ...
    }

}

本次任務執(zhí)行耗時為 473ms,性能得到了極大的提升。現(xiàn)在我們已經(jīng)清楚的了解了緩存?zhèn)喂蚕韱栴},接下來我們討論下在 Caffeine 中是如何解決緩存?zhèn)喂蚕韱栴}的。

Caffeine 對緩存?zhèn)喂蚕韱栴}的解決方案

在 緩存之美:萬文詳解 Caffeine 實現(xiàn)原理 中我們提到過,負責記錄寫后任務的 WriterBuffer 數(shù)據(jù)結(jié)構的類繼承關系如下所示:

wKgZPGhiYXaAPMq1AArX0SqWOsQ148.png

如圖中標紅的類所示,它們都是用來解決偽共享問題的,我們以 BaseMpscLinkedArrayQueuePad1 為例來看下它的實現(xiàn):

abstract class BaseMpscLinkedArrayQueuePad1 extends AbstractQueue {
    byte p000, p001, p002, p003, p004, p005, p006, p007;
    byte p008, p009, p010, p011, p012, p013, p014, p015;
    byte p016, p017, p018, p019, p020, p021, p022, p023;
    byte p024, p025, p026, p027, p028, p029, p030, p031;
    byte p032, p033, p034, p035, p036, p037, p038, p039;
    byte p040, p041, p042, p043, p044, p045, p046, p047;
    byte p048, p049, p050, p051, p052, p053, p054, p055;
    byte p056, p057, p058, p059, p060, p061, p062, p063;
    byte p064, p065, p066, p067, p068, p069, p070, p071;
    byte p072, p073, p074, p075, p076, p077, p078, p079;
    byte p080, p081, p082, p083, p084, p085, p086, p087;
    byte p088, p089, p090, p091, p092, p093, p094, p095;
    byte p096, p097, p098, p099, p100, p101, p102, p103;
    byte p104, p105, p106, p107, p108, p109, p110, p111;
    byte p112, p113, p114, p115, p116, p117, p118, p119;
}

abstract class BaseMpscLinkedArrayQueueProducerFields extends BaseMpscLinkedArrayQueuePad1 {
    // 生產(chǎn)者操作索引(并不對應緩沖區(qū) producerBuffer 中索引位置)
    protected long producerIndex;
}

可以發(fā)現(xiàn)在這個類中定義了 120 個字節(jié)變量,這樣緩存行大小不論是 64 字節(jié)還是 128 字節(jié),都能保證字段間的隔離。如圖中所示 AbstractQueue 和 BaseMpscLinkedArrayQueueProducerFields 中的變量一定會 被分配到不同的緩存行 中。同理,借助 BaseMpscLinkedArrayQueuePad2 中的 120 個字節(jié)變量,BaseMpscLinkedArrayQueueProducerFields 和 BaseMpscLinkedArrayQueueConsumerFields 中的變量也會被分配到不同的緩存行中,這樣就避免了緩存的偽共享問題。

其實除了 Caffeine 中有解決緩存?zhèn)喂蚕韱栴}的方案外,在 JDK 1.8 中引入了 @Contended 注解,它也可以解決緩存?zhèn)喂蚕韱栴},如下所示為它在 ConcurrentHashMap 中的應用:

public class ConcurrentHashMap extends AbstractMap
        implements ConcurrentMap, Serializable {
    // ...
    
    @sun.misc.Contended
    static final class CounterCell {
        volatile long value;

        CounterCell(long x) {
            value = x;
        }
    }
}

其中的內(nèi)部類 CounterCell 被標記了 @sun.misc.Contended 注解,表示該類中的字段會與其他類的字段相隔離,如果類中有多個字段,實際上該類中的變量間是不隔離的,這些字段可能被分配到同一緩存行中。因為 CounterCell 中只有一個字段,所以它會被被分配到一個緩存行中,剩余緩存行容量被空白內(nèi)存填充,本質(zhì)上也是一種以空間換時間的策略。這樣其他變量的變更就不會影響到 CounterCell 中的變量了,從而避免了緩存?zhèn)喂蚕韱栴}。

這個注解不僅能標記在類上,還能標記在字段上,拿我們的的代碼來舉例:

public class TestFalseSharing {

    static class Pointer {
        @Contended("cacheLine1")
        volatile long x;
        //        long p1, p2, p3, p4, p5, p6, p7;
        @Contended("cacheLine2")
        volatile long y;

        @Override
        public String toString() {
            return "x=" + x + ", y=" + y;
        }
    }
    
    @Test
    public void testFalseSharing() throws InterruptedException {
        // ...
    }

}

它可以指定內(nèi)容來 定義多個字段間的隔離關系。我們使用注解將這兩個字段定義在兩個不同的緩存行中,執(zhí)行結(jié)果耗時與顯示聲明字段占位耗時相差不大,為 520ms。另外需要注意的是,要想使注解 Contended 生效,需要添加 JVM 參數(shù) -XX:-RestrictContended。

再談偽共享

避免偽共享的主要方法是代碼檢查,而且偽共享可能不太容易被識別出來,因為只有在線程訪問的是不同且碰巧在主存中相鄰的全局變量時才會出現(xiàn)偽共享問題,線程的局部存儲或者局部變量不會是偽共享的來源。此外,解決偽共享問題的本質(zhì)是以空間換時間,所以并不適用于在大范圍內(nèi)解決該問題,否則會造成大量的內(nèi)存浪費。

巨人的肩膀

維基百科 - 偽共享

小林coding - 2.3 如何寫出讓 CPU 跑得更快的代碼

知乎 - 雜談 什么是偽共享(false sharing)

博客園 - CPU Cache 與緩存行

博客園 - 偽共享(false sharing),并發(fā)編程無聲的性能殺手

審核編輯 黃宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • cpu
    cpu
    +關注

    關注

    68

    文章

    11067

    瀏覽量

    216672
  • 緩存
    +關注

    關注

    1

    文章

    246

    瀏覽量

    27122
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    MCU緩存設計

    MCU 設計通過優(yōu)化指令與數(shù)據(jù)的訪問效率,顯著提升系統(tǒng)性能并降低功耗,其核心架構與實現(xiàn)策略如下: 一、緩存類型與結(jié)構 指令緩存(I-Cache)與數(shù)據(jù)緩存(D-Cache)? I-Ca
    的頭像 發(fā)表于 05-07 15:29 ?322次閱讀

    Nginx緩存配置詳解

    Nginx 是一個功能強大的 Web 服務器和反向代理服務器,它可以用于實現(xiàn)靜態(tài)內(nèi)容的緩存緩存可以分為客戶端緩存和服務端緩存
    的頭像 發(fā)表于 05-07 14:03 ?529次閱讀
    Nginx<b class='flag-5'>緩存</b>配置詳解

    nginx中強緩存和協(xié)商緩存介紹

    緩存直接告訴瀏覽器:在緩存過期前,無需與服務器通信,直接使用本地緩存
    的頭像 發(fā)表于 04-01 16:01 ?340次閱讀

    緩存與不帶緩存的固態(tài)硬盤有什么區(qū)別

    延遲、高可靠性和低噪音等優(yōu)點,逐漸取代了傳統(tǒng)的機械硬盤,成為市場的主流選擇。而固態(tài)硬盤中的緩存技術,更是提升其性能的關鍵因素之一。本文將深入探討固態(tài)硬盤的定義、結(jié)構、工作原理,以及帶緩存與不帶
    的頭像 發(fā)表于 02-06 16:35 ?2262次閱讀

    鴻蒙原生頁面高性能解決方案上線OpenHarmony社區(qū) 助力打造高性能原生應用

    NEXT的原生頁面高性能解決方案,從頁面滑動、跳轉(zhuǎn)及應用冷啟動等關鍵環(huán)節(jié),為開發(fā)者提供全面的支持。目前,這些解決方案均已上線OpenHarmony開源社區(qū),可在OpenHarmony三方庫中心倉進行搜索,歡迎開發(fā)者多多使用和共建,打造更極致性能的鴻蒙應用,共建
    發(fā)表于 01-02 18:00

    緩存對大數(shù)據(jù)處理的影響分析

    緩存對大數(shù)據(jù)處理的影響顯著且重要,主要體現(xiàn)在以下幾個方面: 一、提高數(shù)據(jù)訪問速度 在大數(shù)據(jù)環(huán)境中,數(shù)據(jù)存儲通常采用分布式存儲系統(tǒng),數(shù)據(jù)量龐大,直接從存儲系統(tǒng)中讀取數(shù)據(jù)會存在較高的延遲。而通過緩存技術
    的頭像 發(fā)表于 12-18 09:45 ?733次閱讀

    HTTP緩存頭的使用 本地緩存與遠程緩存的區(qū)別

    HTTP緩存頭是一組HTTP響應頭,它們控制瀏覽器和中間代理服務器如何緩存網(wǎng)頁內(nèi)容。合理使用HTTP緩存頭可以顯著提高網(wǎng)站的加載速度和性能,減少服務器的負載。 1. HTTP
    的頭像 發(fā)表于 12-18 09:41 ?445次閱讀

    Web緩存的類型及功能分析

    隨著互聯(lián)網(wǎng)的迅速發(fā)展,用戶對網(wǎng)絡內(nèi)容的訪問需求日益增長。為了提高用戶體驗和降低服務器負擔,Web緩存技術應運而生。Web緩存通過存儲重復請求的數(shù)據(jù),減少了對原始服務器的訪問次數(shù),從而加快了數(shù)據(jù)傳輸
    的頭像 發(fā)表于 12-18 09:35 ?762次閱讀

    緩存技術在軟件開發(fā)中的應用

    在現(xiàn)代軟件開發(fā)中,隨著數(shù)據(jù)量的爆炸性增長和用戶對響應速度的高要求,緩存技術成為了提升系統(tǒng)性能的重要手段。緩存技術通過將數(shù)據(jù)存儲在離用戶更近的位置,減少數(shù)據(jù)訪問延遲,提高數(shù)據(jù)處理速度,從而優(yōu)化
    的頭像 發(fā)表于 12-18 09:32 ?678次閱讀

    什么是緩存(Cache)及其作用

    處理器和主存儲器之間的存儲系統(tǒng),其主要目的是減少處理器訪問主存儲器所需的時間。由于處理器的運行速度遠遠高于主存儲器的訪問速度,這種速度差異會導致處理器在等待數(shù)據(jù)時出現(xiàn)空閑,從而降低整體性能緩存通過存儲最近或頻繁訪問的數(shù)據(jù)來緩
    的頭像 發(fā)表于 12-18 09:28 ?1.1w次閱讀

    探討移動設備中的緩存文件管理

    /O性能和存儲壽命。結(jié)果表明其具有很好的實用價值。 ? ?? 背景 由于應用程序的動態(tài)特性和整體系統(tǒng)優(yōu)化,大部分移動應用程序都需要從網(wǎng)絡中下載文件或數(shù)據(jù)。 即使現(xiàn)代通信網(wǎng)絡具有更高的帶寬,許多應用程序仍然嚴重依賴移動設備上緩存的數(shù)據(jù),以避免通過網(wǎng)絡重新下載
    的頭像 發(fā)表于 11-28 11:50 ?1045次閱讀
    探討移動設備中的<b class='flag-5'>緩存</b>文件管理

    緩存之美——如何選擇合適的本地緩存

    Guava cache是Google開發(fā)的Guava工具包中一套完善的JVM本地緩存框架,底層實現(xiàn)的數(shù)據(jù)結(jié)構類似于ConcurrentHashMap,但是進行了更多的能力拓展,包括緩存過期時間設置、緩存容量設置、多種淘汰策略、
    的頭像 發(fā)表于 11-17 14:24 ?798次閱讀
    <b class='flag-5'>緩存</b>之美——如何選擇合適的本地<b class='flag-5'>緩存</b>?

    TMS320C64x在高性能DSP應用中的高速緩存使用情況

    電子發(fā)燒友網(wǎng)站提供《TMS320C64x在高性能DSP應用中的高速緩存使用情況.pdf》資料免費下載
    發(fā)表于 10-21 09:43 ?0次下載
    TMS320C64x在<b class='flag-5'>高性能</b>DSP應用中的高速<b class='flag-5'>緩存</b>使用情況

    DSP指令緩存性能OMAP5912

    電子發(fā)燒友網(wǎng)站提供《DSP指令緩存性能OMAP5912.pdf》資料免費下載
    發(fā)表于 10-16 10:16 ?0次下載
    DSP指令<b class='flag-5'>緩存</b><b class='flag-5'>性能</b>OMAP5912

    什么是CPU緩存?它有哪些作用?

    CPU緩存(Cache Memory)是計算機系統(tǒng)中一個至關重要的組成部分,它位于CPU與內(nèi)存之間,作為兩者之間的臨時存儲器。CPU緩存的主要作用是減少CPU訪問內(nèi)存所需的時間,從而提高系統(tǒng)的整體性能。以下將詳細闡述CPU
    的頭像 發(fā)表于 08-22 14:54 ?5976次閱讀
    主站蜘蛛池模板: 精品免费福利视频 | 亚洲精品影视 | 激情文学综合丁香 | 欧美无遮挡国产欧美另类 | 四虎在线观看一区二区 | 未成人禁止视频高清在线观看 | 岛国毛片| 中文字幕在线一区二区三区 | 二级黄绝大片中国免费视频0 | 亚洲人毛茸茸bbxx | 欧美色图一区二区 | 日本欧美一区二区三区视频 | 中文字幕一区2区3区 | 午夜免费啪 | 国产亚洲精品在天天在线麻豆 | 久操久操久操 | 亚洲影院手机版777点击进入影院 | 好男人社区www的视频免费 | 亚洲经典乱码在线播 | 51午夜 | 李老汉的性生生活2 | 天天夜夜骑 | 天天草天天射 | 美女视频黄的免费视频网页 | 日本最好的免费影院 | 欧美国产精品主播一区 | 久久精品国产免费观看99 | 黄色毛片免费网站 | 日本美女中出 | 五月婷婷六月丁香综合 | 美女扒开尿口给男人桶 | 免费视频久久看 | 新午夜影院 | 欧美三级大片在线观看 | 91九色麻豆| 艹逼视频免费观看 | 大黄网站色多多 | 天堂w| 亚洲国产成人精品女人久久久 | 天天草狠狠干 | 免费大片黄日本在线观看 |