在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

mysql磁盤碎片整理

京東云 ? 來源:jf_75140285 ? 作者:jf_75140285 ? 2024-08-27 15:26 ? 次閱讀

背景

數據結轉過程中經常進行 delete 操作,產生空白空間,如果進行新的插入操作,MySQL將嘗試利用這些留空的區域,但仍然無法將其徹底占用,于是造成了數據的存儲位置不連續,以及物理存儲順序與理論上的排序順序不同,久而久之就產生了碎片。

碎片治理思路

根據線上處理經驗總結比對4種處理磁盤碎片優缺點

?

治理方案 優勢 缺點 備注
將數據量巨大的表設計成分區表,按時間分區 通過結轉分區數據,刪除分區釋放磁盤碎片,磁盤IO抖動秒級別,對線上業務影響小 ?
估算數據量,每個分區不超過3億數據350G為佳;庫存流水,訂單表這些表應該在創建時就應該設計成分區表,避免以后磁盤碎片痛點
重建表存儲引擎,重新組織數據(ALTER TABLE tablename ENGINE=InnoDB;) ?
整理過程加鎖,周期長,且對線上業務影響較大:10億數據量,1000G,tp99會持續超過60s 謹慎操作
主從切換(DBA可使用一個磁盤更大的干凈的庫,進行主從切換) ?
涉及面廣,牽扯范圍較大,處理時長在分鐘級 謹慎操作
創建臨時表進行數據雙寫最后進行數據庫表名切換 零延遲,無抖動,對線上無任何影響 需要磁盤空間較大 ?

?

創建分區表

wKgaombNf52AKKGpABCZGfhqC9I055.png

上述分區表,在某一分區內數據結轉完成后,

ALTER TABLE warehouse_stock_flow drop PARTITION p24;

當然不是所有的表都是可以創建分區表的。如果某一張數據表在很長一段時間內沒有進行數據結轉,且無法創建分區表的話,可以利用以下方法。

?

表名切換

如果某一張數據表在很長一段時間內沒有進行數據結轉,可以創建臨時表,通過大數據將某一結轉周期內數據推送至臨時表,在代碼層面進行數據的雙寫,最后再通過表名更換的方式進行表名轉換。其實,治理磁盤碎片最好的方法就是刪除表,不同業務對數據的要求不同。如果有可能的話新建一個臨時表。

利用rename語句對數據庫表信息進行修改,不會鎖表,可以達到零延遲,無抖動,對線上無任何影響。

wKgZombNf56AMgbUAAQwDHqV6Cg590.png

rename table xx_record to xx_record_temp1,xx_temp to xx_record,xx_record_temp1 to xx_record_temp;

總結

不管是使用云還是商城數據庫,只要使用mysql,必然會遇到Mysql碎片問題痛點,數據量大的業務表應該設計成分區表方便磁盤碎片整理,降低維護成本和業務影響。碎片清理前后,IO性能會上升,SQL執行效率更快。所以,在日常運維工作中,應對碎片進行定期清理,保證數據庫有穩定的性能和充足的空間。

擴展

提到提高IO性能,在緊急情況下還可以考慮開啟刷盤(設置 sync_binlog=0;innodb_flush_log_at_trx_commit=0),但開啟刷盤會有數據丟失風險(集團數據庫模板配置參數默認sync_binlog=1;innodb_flush_log_at_trx_commit=1)。

附件

mysql數據庫核心參數介紹:https://www.cnblogs.com/klvchen/p/10861850.html?

審核編輯 黃宇

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 數據庫
    +關注

    關注

    7

    文章

    3885

    瀏覽量

    65603
  • 磁盤碎片整理

    關注

    0

    文章

    2

    瀏覽量

    5538
  • MySQL
    +關注

    關注

    1

    文章

    841

    瀏覽量

    27372
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    晶圓甩干機如何降低碎片

    在半導體制造過程中,晶圓甩干機發揮著至關重要的作用。然而,晶圓甩干過程中的碎片問題一直是影響生產效率和產品質量的關鍵因素之一。晶圓作為半導體器件的載體,其完整性對于后續的制造工藝至關重要。即使是極小
    的頭像 發表于 03-25 10:49 ?215次閱讀

    VMWare Linux系統磁盤擴容

    當我們在VMware Linux虛擬機安裝軟件的時候,發現磁盤不夠了,可以考慮給磁盤擴容,而不是重建虛擬機。
    的頭像 發表于 02-17 14:01 ?529次閱讀
    VMWare Linux系統<b class='flag-5'>磁盤</b>擴容

    使用插件將Excel連接到MySQL/MariaDB

    使用插件將 Excel 連接到 MySQL/MariaDB 適用于 MySQL 的 Devart Excel 插件允許您將 Microsoft Excel 連接到 MySQL 或 MariaDB
    的頭像 發表于 01-20 12:38 ?461次閱讀
    使用插件將Excel連接到<b class='flag-5'>MySQL</b>/MariaDB

    適用于MySQL和MariaDB的.NET連接器

    支持 ORM 的適用于 MySQL 和 MariaDB 的 .NET 連接器 dotConnect for MySQL 是一種高性能 ADO.NET 數據提供程序,可在開發 MySQL 的應用程序
    的頭像 發表于 01-16 14:17 ?326次閱讀
    適用于<b class='flag-5'>MySQL</b>和MariaDB的.NET連接器

    MySQL數據庫的安裝

    MySQL數據庫的安裝 【一】各種數據庫的端口 MySQL :3306 Redis :6379 MongoDB :27017 Django :8000 flask :5000 【二】MySQL 介紹
    的頭像 發表于 01-14 11:25 ?403次閱讀
    <b class='flag-5'>MySQL</b>數據庫的安裝

    什么是raid磁盤冗余陣列

    什么是raid 磁盤冗余陣列 這是由多塊獨立磁盤(多為硬盤)組合的一個超大容量磁盤組。 ? 大白話的解釋磁盤冗余陣列,就是將很多塊硬盤組合成一個整體,不同的RAID級別,可以實現不同的
    的頭像 發表于 12-16 16:41 ?683次閱讀
    什么是raid<b class='flag-5'>磁盤</b>冗余陣列

    MySQL還能跟上PostgreSQL的步伐嗎

    Percona 的老板 Peter Zaitsev最近發表一篇博客,討論了MySQL是否還能跟上PostgreSQL的腳步。Percona 作為MySQL 生態扛旗者,Percona 開發了知名
    的頭像 發表于 11-18 10:16 ?444次閱讀
    <b class='flag-5'>MySQL</b>還能跟上PostgreSQL的步伐嗎

    詳解MySQL多實例部署

    詳解MySQL多實例部署
    的頭像 發表于 11-11 11:10 ?506次閱讀

    MySQL編碼機制原理

    前言 一位讀者在本地部署 MySQL 測試環境時碰到一個問題,我覺得挺有代表性的,所以寫篇文章介紹一下,看完相信你會對 MySQL 的編碼機制有最本質的了解,本文的目錄結構如下 讀者問題簡介
    的頭像 發表于 11-09 11:01 ?485次閱讀

    適用于MySQL的dbForge架構比較

    dbForge Schema Compare for MySQL 是一種工具,用于輕松有效地比較和部署 MySQL 數據庫結構和腳本文件夾差異。該工具提供了 MySQL 數據庫架構中所有差異的全面視圖。
    的頭像 發表于 10-28 09:41 ?439次閱讀
    適用于<b class='flag-5'>MySQL</b>的dbForge架構比較

    配置MySQL主從復制和讀寫分離

    配置MySQL主從復制和讀寫分離
    的頭像 發表于 10-23 11:44 ?705次閱讀
    配置<b class='flag-5'>MySQL</b>主從復制和讀寫分離

    Jtti:MySQL初始化操作如何設置root密碼

    MySQL初始化時,可以通過以下步驟設置root密碼: 打開命令行工具,使用以下命令啟動MySQL服務: ? sudo service mysql start ? 使用以下命令登錄MySQL
    的頭像 發表于 08-08 16:45 ?644次閱讀

    Linux磁盤IO詳細解析

      在講解磁盤IO前,先簡單說下什么是磁盤。磁盤是可以持久化存儲的設備,根據存儲介質的不同,常見磁盤可以分為兩類:機械磁盤和固態
    的頭像 發表于 08-05 15:49 ?912次閱讀
    Linux<b class='flag-5'>磁盤</b>IO詳細解析

    MySQL知識點匯總

    大家好,這部分被稱為DQL部分,是每個學習MySQL必須要學會的部分,下面就讓我來介紹MySQL中的其他部分。
    的頭像 發表于 08-05 15:27 ?565次閱讀
    <b class='flag-5'>MySQL</b>知識點匯總

    華納云:如何修改MySQL的默認端口

    MySQL是世界上最流行的開源關系型數據庫管理系統之一。在某些情況下,由于安全性、網絡策略或端口沖突的原因,數據庫管理員可能需要更改MySQL服務的默認監聽端口。本文將指導您如何在不同的操作系統上
    的頭像 發表于 07-22 14:56 ?439次閱讀
    華納云:如何修改<b class='flag-5'>MySQL</b>的默認端口
    主站蜘蛛池模板: 天天操天天碰 | 亚洲一级影院 | 免费的很黄很色的床小视频 | 久久综合九九亚洲一区 | 天天拍夜夜添久久精品免费 | 一区二区手机视频 | 午夜人成| 成人在线视频网址 | 高清成年美女xx免费网站黄 | 天天碰夜夜 | 欧美性爽xxxⅹbbbb | 手机看片福利盒子久久 | 久操综合 | 五月婷婷综合在线 | 免费啪视频在线观看免费的 | 欧美午夜在线播放 | jlzzjlzz亚洲大全 | 久久国产视频网站 | 午夜精品视频在线 | 极品色天使在线婷婷天堂亚洲 | 美女免费视频黄 | 婷婷五月天.com | 一级一片免费视频播放 | 来吧成人综合网 | 亚洲天天做日日做天天看2018 | 久久男女 | 日日夜夜操操 | 欧美成人午夜精品免费福利 | 精品国产一区二区三区成人 | 欧美性视频一区二区三区 | 91极品反差婊在线观看 | 婷婷综合激情网 | 国产精品不卡片视频免费观看 | 国产黄大片在线观看 | 免费在线观看黄 | 夜夜爽夜夜| 久久性生活 | 免费爱爱视频网站 | 亚洲天堂电影在线观看 | 青草国产在线视频 | 精品视频一区二区三区四区五区 |