在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

從內存分配的角度來分析下string的實現機制

工程師鄧生 ? 來源:高性能架構探索 ? 作者:雨樂 ? 2022-09-05 08:58 ? 次閱讀

大家好!對于C++開發人員來說,string大概是使用最多的標準庫數據結構之一,一直以來也就僅限于使用,對于底層實現似懂非懂。所以,最近抽出點時間,大致研究了下string的底層實現。今天,就從內存分配的角度來分析下string的實現機制。

直接分配

大概在08年的時候,手動實現過string,沒有考慮性能,所以單純是從功能的角度進行實現,下面摘抄了部分代碼,如下:

string::string(constchar*s){
size_=strlen(s);
buffer_=newchar[size_+1];
strcpy(buffer_,s);
}

string&string::string(conststring&str){
size_+=str.size_;
char*data=newchar[size_+1];
strcpy(data,buffer_);
strcat(data,str.buffer_);

delete[]buffer_;
buffer_=data;
return*this;
}

上述代碼為string的部分成員函數,從上述實現可以看出,無論是構造還是拷貝,都是重新在堆上(使用new關鍵字)分配一塊內存。這樣做的優點是實現簡單,而缺點呢,因為每次都在堆上進行分配,而堆上內存的分配效率非常差(當然是相對棧來說的),所以有沒有更好的實現方式呢?下面我們看先STL中的基本實現。

SSO

記得之前在看Redis源碼的時候,對整數集合(intset)有個優化:根據新元素的類型,擴展整數集合底層數組的空間大小,并未新元素分配空間,也就是說,假設在初始的時候,集合中最大的數為3,那么這個時候集合的類型為INT_16,如果此時新增一個元素為65536,那么就將集合的類型更改為INT_32,并重新為集合分配空間,將之前的數據進行類型擴展。

那么string有沒有類似Redis整數集合的功能,進行類型升級呢?

帶著這個疑問,研究了string源碼,發現里面使用了一個名為SSO的優化策略~~~

SSO為Small String Optimization的簡寫,中文譯為小字符串優化,基本原理是:當分配大小小于16個字節時候,從棧上進行分配,而如果大于等于16個字節,則在堆上進行內存分配。PS:需要注意的是,此優化自GCC5.1生效,也就是說對于GCC版本小于5的,無論長度為多少,都從堆上進行分配。

為了證實上述結論,測試代碼如下:

#include
#include
#include

void*operatornew(std::size_tn){
std::cout<

在上述代碼中,我們重載了operator new,以替換string中的new實現,這樣做的好處是,可以通過輸出來發現是否調用了new進行動態分配。

G++ 4.9.4版本輸出如下:

0:
[Allocating26bytes]1:=
[Allocating27bytes]2:==
[Allocating28bytes]3:===
[Allocating29bytes]4:====
[Allocating30bytes]5:=====
[Allocating31bytes]6:======
[Allocating32bytes]7:=======
[Allocating33bytes]8:========
[Allocating34bytes]9:=========
[Allocating35bytes]10:==========
[Allocating36bytes]11:===========
[Allocating37bytes]12:============
[Allocating38bytes]13:=============
[Allocating39bytes]14:==============
[Allocating40bytes]15:===============
[Allocating41bytes]16:================
[Allocating42bytes]17:=================
[Allocating43bytes]18:==================
[Allocating44bytes]19:===================
[Allocating45bytes]20:====================
[Allocating46bytes]21:=====================
[Allocating47bytes]22:======================
[Allocating48bytes]23:=======================

GCC5.1 輸出如下:

0:
1:=
2:==
3:===
4:====
5:=====
6:======
7:=======
8:========
9:=========
10:==========
11:===========
12:============
13:=============
14:==============
15:===============
16:[Allocating17bytes]================
17:[Allocating18bytes]=================
18:[Allocating19bytes]==================
19:[Allocating20bytes]===================
20:[Allocating21bytes]====================
21:[Allocating22bytes]=====================
22:[Allocating23bytes]======================
23:[Allocating24bytes]=======================

從GCC5.1的輸出內容可以看出,當字符串長度小于16的時候,沒有調用我們的operator new函數,這就從側面證明了前面的結論當分配大小小于16個字節時候,從棧上進行分配,而如果大于等于16個字節,則在堆上進行內存分配。(PS:GCC4.9.4版本的輸出,分配字節數大于實際的字節數,這個是string的又一個優化策略,即預分配策略,在后面的內容中將會講到)。

直奔主題

不妨閉上眼睛,仔細想下,如果讓我們自己來實現該功能,你會怎么做?

可能大部分人的思路是:定義一個固定長度的char數組,在進行構造的時候,判斷字符串的長度,如果長度小于某個定值,則使用該數組,否則在堆上進行分配~~~

好了,為了驗證上述思路與具體實現是否一致,結合源碼一起來分析~~

首先,摘抄了部分string的源碼,如下:string源碼

template
classbasic_string
{
private:
//Useempty-baseoptimization:http://www.cantrip.org/emptyopt.html
struct_Alloc_hider:allocator_type//TODOcheck__is_final
{
_Alloc_hider(pointer__dat,const_Alloc&__a=_Alloc())
:allocator_type(__a),_M_p(__dat){}

pointer_M_p;//Theactualdata.
};

_Alloc_hider_M_dataplus;
size_type_M_string_length;

enum{_S_local_capacity=15/sizeof(_CharT)};

union
{
_CharT_M_local_buf[_S_local_capacity+1];
size_type_M_allocated_capacity;
};
};

上面抽出了我們需要關注的部分代碼,只需要關注以下幾個點:

?_M_string_length已分配字節數

?_M_dataplus實際數據存放的位置

? union字段:兩個字段中較大的一個_M_local_buf為 16 字節

?_M_local_buf這是一個用以實現SSO功能的字段,大小為16(15 + 1其中1為結束符)個字節

?_M_allocated_capacity是一種size_t類型,功能類似于vector中的預分配,其與_M_local_buf不能共存

從上述源碼中,我們看到有個變量_M_local_buf,從字面意思看就是一個本地或者局部buffer,猜測是用來存儲大小不足16字節的內容,為了證實我們的猜測,下面結合GDB一起再分析下SSO的實現機制,示例代碼如下:

#include

intmain(){
std::stringstr("hello");
return0;
}

gdb調試代碼如下:

(gdb)s
Singlesteppinguntilexitfromfunctionmain,
whichhasnolinenumberinformation.
std::basic_string,std::allocator>::basic_string(charconst*,std::allocatorconst&)()
at/root/gcc-5.4.0/build/x86_64-unknown-linux-gnu/libstdc++-v3/include/bits/basic_string.h:454
454basic_string(const_CharT*__s,const_Alloc&__a=_Alloc())
(gdb)s
141returnstd::pointer_traits::pointer_to(*_M_local_buf);
(gdb)n
454basic_string(const_CharT*__s,const_Alloc&__a=_Alloc())
(gdb)
456{_M_construct(__s,__s?__s+traits_type::length(__s):__s+npos);}
(gdb)
141returnstd::pointer_traits::pointer_to(*_M_local_buf);
(gdb)
456{_M_construct(__s,__s?__s+traits_type::length(__s):__s+npos);}
(gdb)
267{return__builtin_strlen(__s);}
(gdb)
456{_M_construct(__s,__s?__s+traits_type::length(__s):__s+npos);}
(gdb)
195_M_construct(__beg,__end,_Tag());
(gdb)
456{_M_construct(__s,__s?__s+traits_type::length(__s):__s+npos);}

單從上述信息不能很明確的了解整個構造過程,我們留意到構造的過程在basic_string.h:454,所以就通過源碼進行分析,如下:

basic_string(const_CharT*__s,const_Alloc&__a=_Alloc())
:_M_dataplus(_M_local_data(),__a)
{_M_construct(__s,__s?__s+traits_type::length(__s):__s+npos);}

_M_construct從函數字面看出是用來構造該對象,在后面進行分析,下面先分析下M_dataplus函數實現,

_M_local_data()const
{
#if__cplusplus>=201103L
returnstd::pointer_traits::pointer_to(*_M_local_buf);
#else
returnconst_pointer(_M_local_buf);
#endif
}

在前面內容中,提到過_M_dataplus用來指向實際存儲數據的地址,在basic_string()函數的構造中,首先將__M_dataplus指向local_buf,然后調用__M_construct進行實際構造,而M_construct最終會調用如下代碼:

template
template
void
basic_string<_CharT,?_Traits,?_Alloc>::
_M_construct(_InIterator__beg,_InIterator__end,
std::forward_iterator_tag)
{
//NB:Notrequired,butconsideredbestpractice.
if(__gnu_cxx::__is_null_pointer(__beg)&&__beg!=__end)
std::__throw_logic_error(__N("basic_string::"
"_M_constructnullnotvalid"));

size_type__dnew=static_cast(std::distance(__beg,__end));

if(__dnew>size_type(_S_local_capacity))
{
_M_data(_M_create(__dnew,size_type(0)));
_M_capacity(__dnew);
}

//Checkforout_of_rangeandlength_errorexceptions.
__try
{this->_S_copy_chars(_M_data(),__beg,__end);}
__catch(...)
{
_M_dispose();
__throw_exception_again;
}

_M_set_length(__dnew);
}

在上述代碼中,首先計算當前字符串的實際長度,如果長度大于_S_local_capacity即15,那么則通過_M_create在堆上創建一塊內存,最后通過_S_copy_chars函數進行內容拷貝。

結語

本文中的測試環境基于Centos6.8 & GCC5.4,也就是說在本環境中,string中如果實際數據小于16個字節,則在本地局部存儲,而大于15字節,則存儲在堆上,這也就是string的一個優化特性SSO(Small String Optimization)。在查閱了相關資料,發現15字節的限制取決于編譯器和操作系統,在fedora和red-hat中,字符串總是存儲在堆中(來自于網絡,由于手邊缺少相關環境,所以未能驗證,抱歉)。

好了,今天的文章就到這,我們下期見!



審核編輯:劉清

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • GCC
    GCC
    +關注

    關注

    0

    文章

    108

    瀏覽量

    24890
  • gdb
    gdb
    +關注

    關注

    0

    文章

    60

    瀏覽量

    13349
  • string
    +關注

    關注

    0

    文章

    40

    瀏覽量

    4748

原文標題:string 性能優化之存儲:棧或者堆

文章出處:【微信號:C語言與CPP編程,微信公眾號:C語言與CPP編程】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    云計算環境的IP地址分配方式

    提供商為用戶提供的各種云資源分配網絡標識符,以實現云資源之間以及云資源與外部網絡的通信。云計算通常包括基礎設施即服務、平臺即服務和軟件即服務等多種服務模式,不同模式IP地址分配方式也
    的頭像 發表于 12-19 14:02 ?201次閱讀

    什么是虛擬內存分頁 Windows系統虛擬內存優化方法

    虛擬內存分頁概述 在Windows操作系統中,虛擬內存是通過分頁機制實現的。分頁允許系統將內存中的數據移動到硬盤上,以便為當前運行的程序騰出
    的頭像 發表于 12-04 09:16 ?609次閱讀

    轉載 golang內存分配

    Go 的分配采用了類似 tcmalloc 的結構.特點: 使用一小塊一小塊的連續內存頁, 進行分配某個范圍大小的內存需求. 比如某個連續 8KB 專門用于
    的頭像 發表于 09-05 14:12 ?312次閱讀
    轉載 golang<b class='flag-5'>內存</b><b class='flag-5'>分配</b>

    內存管理的硬件結構

    常見的內存分配函數有malloc,mmap等,但大家有沒有想過,這些函數在內核中是怎么實現的?換句話說,Linux內核的內存管理是怎么實現
    的頭像 發表于 09-04 14:28 ?398次閱讀
    <b class='flag-5'>內存</b>管理的硬件結構

    原理聊JVM(一):染色標記和垃圾回收算法

    更好地優化自己的代碼,并解決一些潛在的性能問題。 本文及后續文章將從原理聊起,對JVM的內存分配、GC、編譯等知識進行分析和總結。 1 JVM運行時內存劃分 1.1 運行時數據區域 ?
    的頭像 發表于 08-20 15:25 ?293次閱讀
    <b class='flag-5'>從</b>原理聊JVM(一):染色標記和垃圾回收算法

    Linux內核中的頁面分配機制

    Linux內核中是如何分配出頁面的,如果我們站在CPU的角度去看這個問題,CPU能分配出來的頁面是以物理頁面為單位的。也就是我們計算機中常講的分頁機制。本文就看下Linux內核是如何管
    的頭像 發表于 08-07 15:51 ?353次閱讀
    Linux內核中的頁面<b class='flag-5'>分配機制</b>

    可以用os_malloc() 分配多少內存?有哪些限制?

    我可以用 os_malloc() 分配多少內存?有哪些限制?
    發表于 07-15 06:32

    ESP32S3+LVGL創建一個界面,請問能只在SPIRAM分配內存,IRAM不分配嗎?

    各位前輩好。ESP32S3+LVGL的開發的過程中發現,創建一個界面,會同時在SPIRAM和IRAM分配相同大小的內存。請問能只在SPIRAM分配內存,IRAM不
    發表于 06-06 07:45

    HarmonyOS實戰開發-內存快照Snapshot Profiler功能使用指導

    OpenHarmony API 9及以上版本的Stage工程。 場景示例 本示例設置兩個頁面,通過內存快照來分析頁面跳轉場景是否存在內存泄露問題。 主頁面代碼如下: import r
    發表于 05-11 13:51

    FreeRTOS如何在中斷中調用內存分配函數?

    最近在玩FreeRTOS,遇到一個問題,就是不知如何在中斷中調用內存分配函數。pvPortMalloc函數中會調用xTaskResumeAll,而這個函數不能再中斷調用,所以請問在中斷中進行內存
    發表于 05-08 08:25

    基于DE1-SOC的String Art實現

    String Art起源于19世紀的數學家Mary Everest Boole的設計,隨后發展成一種利用釘子和線進行作畫的藝術,主要是通過線的稠密度表現不同的圖案。
    的頭像 發表于 04-09 11:02 ?542次閱讀
    基于DE1-SOC的<b class='flag-5'>String</b> Art<b class='flag-5'>實現</b>

    深入理解Java 8內存管理機制及故障排查實戰指南

    Java的自動內存管理機制是由 JVM 中的垃圾收集器實現的,垃圾收集器會定期掃描堆內存中的對象,檢測并清除不再使用的對象,以釋放
    的頭像 發表于 04-04 08:10 ?1063次閱讀
    深入理解Java 8<b class='flag-5'>內存</b>管理<b class='flag-5'>機制</b>及故障排查實戰指南

    老板角度解讀工廠物料流轉機器人

    老板角度解讀工廠物料流轉機器人傳統的AGV主要是重載/大規格且針對大型/超大型具有規范化管理能力(已使用ERP系統)的工廠用于物料高效流轉轉。其優勢就是多臺AGV同時使用,具有調度控制功能且物料
    的頭像 發表于 03-30 08:13 ?482次閱讀
    <b class='flag-5'>從</b>老板<b class='flag-5'>角度</b><b class='flag-5'>來</b>解讀工廠物料流轉機器人

    Linux內核內存管理之內核非連續物理內存分配

    我們已經知道,最好將虛擬地址映射到連續頁幀,從而更好地利用緩存并實現更低的平均內存訪問時間。然而,如果對內存區域的請求并不頻繁,那么考慮基于通過連續線性地址訪問非連續頁幀的分配方案是有
    的頭像 發表于 02-23 09:44 ?1080次閱讀
    Linux內核<b class='flag-5'>內存</b>管理之內核非連續物理<b class='flag-5'>內存</b><b class='flag-5'>分配</b>

    Linux內核內存管理之ZONE內存分配

    內核中使用ZONE分配器滿足內存分配請求。該分配器必須具有足夠的空閑頁幀,以便滿足各種內存大小請求。
    的頭像 發表于 02-21 09:29 ?950次閱讀
    主站蜘蛛池模板: 美女扒开内裤无遮挡禁18 | 2021国产精品自在拍在线播放 | 在线视频 二区 | 亚洲天堂伦理 | 日韩在线视频一区二区三区 | 国产香蕉视频在线观看 | 69性成熟xxxxhd | 久99热 | 午夜毛片不卡高清免费 | a级毛片网 | 五月停停 | 日本不卡一区视频 | 国产高清在线精品一区 | 1024 cc香蕉在线观看看中文 | 一级特黄a免费大片 | 天天做天天爱夜夜爽毛片毛片 | 国产四虎精品 | 成人国产一区 | 日本大片免费一级 | 操片| 四虎影永久在线观看网址 | 欧美午夜激情影院 | 久草五月| 亚洲成人综合网站 | 中国农村一级片 | 69视屏| 性生大片免费观看无遮挡 | 伊人啪啪 | 色综合久久久久综合99 | 你懂的在线观看视频 | 亚洲精品乱码久久久久久蜜桃图片 | 日韩美女影院 | 日韩一级片在线免费观看 | 在线看黄网站 | 精品久久香蕉国产线看观看亚洲 | 琪琪see色原网一区二区 | 亚洲国产成人精品青青草原100 | 国产农村三片免费网站 | 午夜片 飘香香影院 | 一区二区三区四区国产精品 | 4338×亚洲全国最大色成网站 |