在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

MySQL中的redo log是什么

數(shù)據(jù)分析與開發(fā) ? 來源:程序猿阿星 ? 作者:程序猿阿星 ? 2021-09-14 09:40 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

前言

說到MySQL,有兩塊日志一定繞不開,一個是InnoDB存儲引擎的redo log(重做日志),另一個是MySQL Servce層的 binlog(歸檔日志)。

只要是數(shù)據(jù)更新操作,就一定會涉及它們,今天就來聊聊redo log(重做日志)。

redo log

redo log(重做日志)是InnoDB存儲引擎獨有的,它讓MySQL擁有了崩潰恢復(fù)能力。

比如MySQL實例掛了或宕機了,重啟時,InnoDB存儲引擎會使用redo log恢復(fù)數(shù)據(jù),保證數(shù)據(jù)的持久性與完整性。

上一篇中阿星講過,MySQL中數(shù)據(jù)是以頁為單位,你查詢一條記錄,會從硬盤把一頁的數(shù)據(jù)加載出來,加載出來的數(shù)據(jù)叫數(shù)據(jù)頁,會放入到Buffer Pool中。

后續(xù)的查詢都是先從Buffer Pool中找,沒有命中再去硬盤加載,減少硬盤IO開銷,提升性能。

更新表數(shù)據(jù)的時候,也是如此,發(fā)現(xiàn)Buffer Pool里存在要更新的數(shù)據(jù),就直接在Buffer Pool里更新。

然后會把“在某個數(shù)據(jù)頁上做了什么修改”記錄到重做日志緩存(redo log buffer)里,接著刷盤到redo log文件里。

理想情況,事務(wù)一提交就會進行刷盤操作,但實際上,刷盤的時機是根據(jù)策略來進行的。

小貼士:每條redo記錄由“表空間號+數(shù)據(jù)頁號+偏移量+修改數(shù)據(jù)長度+具體修改的數(shù)據(jù)”組成

刷盤時機

InnoDB存儲引擎為redo log的刷盤策略提供了innodb_flush_log_at_trx_commit參數(shù),它支持三種策略

設(shè)置為0的時候,表示每次事務(wù)提交時不進行刷盤操作

設(shè)置為1的時候,表示每次事務(wù)提交時都將進行刷盤操作(默認值)

設(shè)置為2的時候,表示每次事務(wù)提交時都只把redo log buffer內(nèi)容寫入page cache

另外InnoDB存儲引擎有一個后臺線程,每隔1秒,就會把redo log buffer中的內(nèi)容寫到文件系統(tǒng)緩存(page cache),然后調(diào)用fsync刷盤。

也就是說,一個沒有提交事務(wù)的redo log記錄,也可能會刷盤。

為什么呢?

因為在事務(wù)執(zhí)行過程redo log記錄是會寫入redo log buffer中,這些redo log記錄會被后臺線程刷盤。

除了后臺線程每秒1次的輪詢操作,還有一種情況,當redo log buffer占用的空間即將達到innodb_log_buffer_size一半的時候,后臺線程會主動刷盤。

下面是不同刷盤策略的流程圖

innodb_flush_log_at_trx_commit=0

為0時,如果MySQL掛了或宕機可能會有1秒數(shù)據(jù)的丟失。

innodb_flush_log_at_trx_commit=1

為1時, 只要事務(wù)提交成功,redo log記錄就一定在硬盤里,不會有任何數(shù)據(jù)丟失。

如果事務(wù)執(zhí)行期間MySQL掛了或宕機,這部分日志丟了,但是事務(wù)并沒有提交,所以日志丟了也不會有損失。

innodb_flush_log_at_trx_commit=2

為2時, 只要事務(wù)提交成功,redo log buffer中的內(nèi)容只寫入文件系統(tǒng)緩存(page cache)。

如果僅僅只是MySQL掛了不會有任何數(shù)據(jù)丟失,但是宕機可能會有1秒數(shù)據(jù)的丟失。

日志文件組

硬盤上存儲的redo log日志文件不只一個,而是以一個日志文件組的形式出現(xiàn)的,每個的redo日志文件大小都是一樣的。

比如可以配置為一組4個文件,每個文件的大小是1GB,整個redo log日志文件組可以記錄4G的內(nèi)容。

它采用的是環(huán)形數(shù)組形式,從頭開始寫,寫到末尾又回到頭循環(huán)寫,如下圖所示。

在個日志文件組中還有兩個重要的屬性,分別是write pos、checkpoint

write pos是當前記錄的位置,一邊寫一邊后移

checkpoint是當前要擦除的位置,也是往后推移

每次刷盤redo log記錄到日志文件組中,write pos位置就會后移更新。

每次MySQL加載日志文件組恢復(fù)數(shù)據(jù)時,會清空加載過的redo log記錄,并把checkpoint后移更新。

write pos和checkpoint之間的還空著的部分可以用來寫入新的redo log記錄。

如果write pos追上checkpoint,表示日志文件組滿了,這時候不能再寫入新的redo log記錄,MySQL得停下來,清空一些記錄,把checkpoint推進一下。

本文到此就結(jié)束了,下篇會聊聊binlog(歸檔日志)。

小結(jié)

相信大家都知道redo log的作用和它的刷盤時機、存儲形式。

現(xiàn)在我們來思考一問題,只要每次把修改后的數(shù)據(jù)頁直接刷盤不就好了,還有redo log什么事。

它們不都是刷盤么?差別在哪里?

1 Byte = 8bit

1 KB = 1024 Byte

1 MB = 1024 KB

1 GB = 1024 MB

1 TB = 1024 GB

實際上,數(shù)據(jù)頁大小是16KB,刷盤比較耗時,可能就修改了數(shù)據(jù)頁里的幾Byte數(shù)據(jù),有必要把完整的數(shù)據(jù)頁刷盤嗎?

而且數(shù)據(jù)頁刷盤是隨機寫,因為一個數(shù)據(jù)頁對應(yīng)的位置可能在硬盤文件的隨機位置,所以性能是很差。

如果是寫redo log,一行記錄可能就占幾十Byte,只包含表空間號、數(shù)據(jù)頁號、磁盤文件偏移量、更新值,再加上是順序?qū)懀运⒈P速度很快。

所以用redo log形式記錄修改內(nèi)容,性能會遠遠超過刷數(shù)據(jù)頁的方式,這也讓數(shù)據(jù)庫的并發(fā)能力更強。

其實內(nèi)存的數(shù)據(jù)頁在一定時機也會刷盤,我們把這稱為頁合并,講Buffer Pool的時候會對這塊細說

責任編輯:haq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 數(shù)據(jù)
    +關(guān)注

    關(guān)注

    8

    文章

    7250

    瀏覽量

    91543
  • 存儲
    +關(guān)注

    關(guān)注

    13

    文章

    4518

    瀏覽量

    87262
  • MySQL
    +關(guān)注

    關(guān)注

    1

    文章

    850

    瀏覽量

    27732

原文標題:聊聊 redo log 是什么?

文章出處:【微信號:DBDevs,微信公眾號:數(shù)據(jù)分析與開發(fā)】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    全棧開發(fā)進階指南:LuatOS-log庫從入門到實戰(zhàn)!

    本文將帶你深入探索LuatOS系統(tǒng)log庫的核心原理與實戰(zhàn)技巧,通過代碼示例解析日志管理、錯誤追蹤及性能優(yōu)化的最佳實踐,助力全棧工程師構(gòu)建更穩(wěn)健的物聯(lián)網(wǎng)應(yīng)用。 今天,我們一起來認識LuatOS
    的頭像 發(fā)表于 05-15 16:12 ?2291次閱讀
    全棧開發(fā)進階指南:LuatOS-<b class='flag-5'>log</b>庫從入門到實戰(zhàn)!

    恩智浦解讀Zephyr log系統(tǒng)的使用 Zephyr的shell和log功能介紹

    之前 我們從 0 開始新建了一個簡單的 Zephyr 應(yīng)用- 從0開始打造屬于自己的HelloWorld ,本期就 帶著大家熟悉一下 Zephyr 的 shell 和 log 系統(tǒng)。 首先給大家介紹
    的頭像 發(fā)表于 02-27 09:19 ?1098次閱讀
    恩智浦解讀Zephyr <b class='flag-5'>log</b>系統(tǒng)的使用 Zephyr的shell和<b class='flag-5'>log</b>功能介紹

    使用插件將Excel連接到MySQL/MariaDB

    ,可以快速地將數(shù)據(jù)從 MySQL 或 MariaDB 加載到 Excel,立即從數(shù)據(jù)庫刷新 Excel 工作簿的數(shù)據(jù),編輯這些數(shù)據(jù),并將它們保存回 MySQL。之后您能夠像使用的 Excel 工作表一樣
    的頭像 發(fā)表于 01-20 12:38 ?575次閱讀
    使用插件將Excel連接到<b class='flag-5'>MySQL</b>/MariaDB

    MySQL數(shù)據(jù)庫的安裝

    MySQL數(shù)據(jù)庫的安裝 【一】各種數(shù)據(jù)庫的端口 MySQL :3306 Redis :6379 MongoDB :27017 Django :8000 flask :5000 【二】MySQL 介紹
    的頭像 發(fā)表于 01-14 11:25 ?535次閱讀
    <b class='flag-5'>MySQL</b>數(shù)據(jù)庫的安裝

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—Mysql數(shù)據(jù)庫表記錄丟失的數(shù)據(jù)恢復(fù)流程

    Mysql數(shù)據(jù)庫故障: Mysql數(shù)據(jù)庫表記錄丟失。 Mysql數(shù)據(jù)庫故障表現(xiàn): 1、Mysql數(shù)據(jù)庫表無任何數(shù)據(jù)或只有部分數(shù)據(jù)
    的頭像 發(fā)表于 12-16 11:05 ?569次閱讀
    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—<b class='flag-5'>Mysql</b>數(shù)據(jù)庫表記錄丟失的數(shù)據(jù)恢復(fù)流程

    MySQL還能跟上PostgreSQL的步伐嗎

    Percona 的老板 Peter Zaitsev最近發(fā)表一篇博客,討論了MySQL是否還能跟上PostgreSQL的腳步。Percona 作為MySQL 生態(tài)扛旗者,Percona 開發(fā)了知名
    的頭像 發(fā)表于 11-18 10:16 ?527次閱讀
    <b class='flag-5'>MySQL</b>還能跟上PostgreSQL的步伐嗎

    香港云服務(wù)器怎么部署MySQL數(shù)據(jù)庫?

    在香港云服務(wù)器上部署MySQL數(shù)據(jù)庫的步驟如下: 步驟 1: 更新軟件包列表 首先,確保軟件包列表是最新的。在終端執(zhí)行以下命令: sudo apt update 步驟 2: 安裝 MySQL
    的頭像 發(fā)表于 11-14 16:15 ?507次閱讀

    詳解MySQL多實例部署

    詳解MySQL多實例部署
    的頭像 發(fā)表于 11-11 11:10 ?598次閱讀

    LOG200評估模塊

    電子發(fā)燒友網(wǎng)站提供《LOG200評估模塊.pdf》資料免費下載
    發(fā)表于 11-09 14:23 ?0次下載
    <b class='flag-5'>LOG</b>200評估模塊

    MySQL編碼機制原理

    MyQL 編解碼機制介紹 問題解答 讀者問題簡介 為敘述方便,以下的「我」指代讀者 我們知道在 Java 是通過 ?JDBC 來訪問數(shù)據(jù)庫的,以訪問 MySQL 為例,需要配置以下 url 才能訪問
    的頭像 發(fā)表于 11-09 11:01 ?560次閱讀

    適用于MySQL的dbForge架構(gòu)比較

    dbForge Schema Compare for MySQL 是一種工具,用于輕松有效地比較和部署 MySQL 數(shù)據(jù)庫結(jié)構(gòu)和腳本文件夾差異。該工具提供了 MySQL 數(shù)據(jù)庫架構(gòu)中所有差異的全面視圖。
    的頭像 發(fā)表于 10-28 09:41 ?550次閱讀
    適用于<b class='flag-5'>MySQL</b>的dbForge架構(gòu)比較

    配置MySQL主從復(fù)制和讀寫分離

    配置MySQL主從復(fù)制和讀寫分離
    的頭像 發(fā)表于 10-23 11:44 ?782次閱讀
    配置<b class='flag-5'>MySQL</b>主從復(fù)制和讀寫分離

    Jtti:MySQL初始化操作如何設(shè)置root密碼

    '@'localhost' IDENTIFIED BY 'your_new_password'; ? 刷新權(quán)限以使更改生效: ? FLUSH PRIVILEGES; ? 退出MySQL命令行工具: ? exit ? 從此,您就成功設(shè)置了root密碼。在之后的登錄,需要使
    的頭像 發(fā)表于 08-08 16:45 ?797次閱讀

    MySQL知識點匯總

    大家好,這部分被稱為DQL部分,是每個學(xué)習(xí)MySQL必須要學(xué)會的部分,下面就讓我來介紹MySQL的其他部分。
    的頭像 發(fā)表于 08-05 15:27 ?637次閱讀
    <b class='flag-5'>MySQL</b>知識點匯總

    華納云:如何修改MySQL的默認端口

    更改MySQL的默認端口。 理解MySQL配置文件 MySQL的配置文件是控制服務(wù)器設(shè)置的關(guān)鍵。在不同的操作系統(tǒng),這個文件可能位于不同的位置: Linux: /etc/
    的頭像 發(fā)表于 07-22 14:56 ?508次閱讀
    華納云:如何修改<b class='flag-5'>MySQL</b>的默認端口
    主站蜘蛛池模板: 女的扒开尿口让男人桶爽 | 五月激情五月婷婷 | 国产三级久久久精品三级 | 国产精品第一页在线观看 | 视色4se视频在线观看 | 永久免费看片 | se97se成人亚洲网站在线观看 | 亚洲一区三区 | 免费高清一级欧美片在线观看 | 亚洲第一精品夜夜躁人人爽 | 国产午夜在线观看 | 欧美.成人.综合在线 | 天天操天天插天天射 | 成人免费久久精品国产片久久影院 | 中国农村一级片 | 日本视频www | 色爱区综合五月激情 | 中文字幕一区二区三区四区五区人 | 亚洲日本色图 | 一本到在线观看视频不卡 | 日本xxx69hd| 欧美网站色 | 91午夜在线观看 | 人人插视频 | 欧美成人免费夜夜黄啪啪 | 亚洲欧美一区二区三区图片 | 成人影院免费观看 | 91九色成人 | 免费视频爱爱 | 国产一区二区高清在线 | 在线免费观看毛片网站 | 国产亚洲卡二卡3卡4卡乱码 | 一级视频在线播放 | 精品亚洲午夜久久久久 | 国产 麻豆| 欧美成人在线网站 | 天天看片天天操 | 久久国产伦三级理电影 | 久热中文字幕在线精品免费 | 色多多www视频在线观看免费 | 成人在线视频网 |