最新国产好看的视频,伊人天堂AV在线,国产Aaaaaa视频,蜜臀视频在线观看一区,人妻av色图,密臀久久久精品影片,青青视频免费观看毛片,久草在线观看视,国产三级精品色情在线

淺談MySQL數(shù)據(jù)同步到 Redis 緩存的幾種方法

 更新時間:2023年03月16日 10:44:26   作者:吳名氏  
本文主要介紹了淺談MySQL數(shù)據(jù)同步到 Redis 緩存的幾種方法,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧

1 Mysql查完數(shù)據(jù),再同步寫入到Redis中

缺點1:會對接口造成延遲,因為同步寫入redis本身就有延遲,并且還要做重試,如果redis寫入失敗,還需要重試,那就更費時間了。

缺點2:不解耦,如果redis崩了,那直接卡線程了

缺點3:如果人為該數(shù)據(jù)庫,那就沒法同步了, 除非再人為刪除對應(yīng)的Redis,但刪除Redis這個過程也有個時間差

2 Mysql查完數(shù)據(jù),通過發(fā)送MQ,在消費者線程去同步Redis

缺點1:多了層MQ,也就是會有很大的概率導(dǎo)致同步延遲問題.

缺點2:要對MQ的可用性做預(yù)防

缺點3:如果人為該數(shù)據(jù)庫,那就沒法同步了

優(yōu)點1:可以大幅減少接口的延遲返回的問題

優(yōu)點2:MQ本身有重試機制,無需人工去寫重試代碼

優(yōu)點3:解耦,把查詢Mysql和同步Redis完全分離,互不干擾

3 訂閱Mysql的Binlog文件(可借助Canal來進(jìn)行)

CanalServer會偽裝成MysqlServer從庫,去訂閱MysqlServer主庫的Binlog文件

Canal啟動的時候會配置對應(yīng)的消息MQ(RabbitMQ, RocketMQ, Kafka), 監(jiān)聽到Binlog文件有變化是,會把變化的sql語句轉(zhuǎn)換成json格式,并作為消息內(nèi)容發(fā)送到MQ中

項目中只要監(jiān)聽對應(yīng)MQ,就能拿到Binlog改動的內(nèi)容,Json數(shù)據(jù)中有明確的操作類型(CURD), 以及對應(yīng)的數(shù)據(jù)。把對應(yīng)數(shù)據(jù)同步到redis即可

缺點1:canal訂閱Binlog的整個操作過程是單線程的,所以面臨超高并發(fā)的情況下,性能可能不太出色。當(dāng)然可以部署多個Canal 與 多個消費者,但是要注意消息重復(fù)消費問題,做好冪等性校驗

優(yōu)點1:即使人為改數(shù)據(jù)庫,也會監(jiān)聽到,并且也會同步

優(yōu)點2:異步同步,不會對接口返回有格外延遲

4 延遲雙刪

在執(zhí)行修改sql之前,先將redis的數(shù)據(jù)刪除

執(zhí)行更新sql

延遲一段時間

再次刪除redis的數(shù)據(jù)

// 延遲雙刪偽代碼
deleteRedisCache(key);   // 刪除redis緩存
updateMysqlSql(obj);        // 更新mysql
Thread.sleep(100);           // 延遲一段時間
deleteRedisCache(key);   // 再次刪除該key的緩存

缺點:這個延遲時間不好把控,到底延遲多久,這個很難去評估

擴展: 如果不使用延遲雙刪,僅僅是delete緩存,然后改mysql數(shù)據(jù)。只有這兩步會出現(xiàn)什么問題呢?

5. 單個請求,單線程沒問題,高并發(fā)多線程下會出問題

6. 如果Thread1線程要更新數(shù)據(jù),此時Thread1線程把redis清理了

7. 此時Thread2線程來了,但Thread1還沒有更新mysql完畢

8. Thread2查詢redis肯定是null,此時Thread2就要查mysql了,然后再把查到的數(shù)據(jù)寫到緩存

9. 由于Thread1還沒來得及修改mysql數(shù)據(jù),所以此時Thread2查出來的數(shù)據(jù)是【舊數(shù)據(jù)】,Thread2把舊數(shù)據(jù)又寫入Redis 了

10. 此時Thread3線程來了,查詢Redis發(fā)現(xiàn)有數(shù)據(jù),則直接拿緩存數(shù)據(jù)了,此時【Thread3查出來的是舊數(shù)據(jù)】,直接帶著舊數(shù)據(jù)返回了,這就是問題所在

11. 而延遲雙刪的第二次刪除作用就是防止Thread2把舊數(shù)據(jù)又寫入了,有了延遲雙刪,Thread3查詢Redis的時候還是null,就會從mysql 去拿最新數(shù)據(jù)了

12. 所以正常的這個延遲時間,應(yīng)該是Thread2查緩存到拿mysql數(shù)據(jù),到再保存到redis這整個時間,作為Thread1的延遲時間,但是這個Thread2這個過程的時間會受到很多因素影響,因此很難斷定究竟會是多久

5 延遲雙寫

// 延遲雙寫偽代碼
updateMysqlSql(obj);        // 更新mysql
addRedis(key);   // 再次刪除該key的緩存

上述代碼缺陷;

  • 高并發(fā)下,兩條線程同時執(zhí)行上面代碼,并對mysql 修改,且修改內(nèi)容不通,可能會導(dǎo)致Redis與Mysql數(shù)據(jù)不一致
  • T1線程執(zhí)行完updateMysqlSql,釋放了行鎖,此時T2線程再執(zhí)行updateMysqlSql 與 addRedis, 最后T1執(zhí)行addRedis,這種情況會導(dǎo)致數(shù)據(jù)庫改成了T2線程的數(shù)據(jù),但Redis卻是T1線程的數(shù)據(jù)

優(yōu)化

// 完美延遲雙寫偽代碼
開啟事務(wù)
updateMysqlSql(obj);        // 更新mysql
addRedis(key);   // 再次刪除該key的緩存
提交事務(wù)

上述代碼改正:

把兩句代碼放到一個事務(wù)里面,只有T1執(zhí)行完Mysql 與 Redis的時候,T2才能開始執(zhí)行,就可以保證數(shù)據(jù)一致性。推薦使用分布式鎖

雙寫缺點:Mysql 與 Redis是單線程的。性能方面不行,因此不推薦使用

6 總結(jié)

推薦使用Canal的方式,進(jìn)行異步同步。其次是MQ方式

到此這篇關(guān)于淺談MySQL數(shù)據(jù)同步到 Redis 緩存的幾種方法的文章就介紹到這了,更多相關(guān)MySQL數(shù)據(jù)同步到Redis緩存內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!

相關(guān)文章

  • window下mysql 8.0.15 安裝配置方法圖文教程

    window下mysql 8.0.15 安裝配置方法圖文教程

    這篇文章主要為大家詳細(xì)介紹了window下mysql 8.0.15 安裝配置方法圖文教程,具有一定的參考價值,感興趣的小伙伴們可以參考一下
    2019-02-02
  • 詳細(xì)分析MySQL主從復(fù)制

    詳細(xì)分析MySQL主從復(fù)制

    這篇文章主要介紹了MySQL主從復(fù)制的相關(guān)資料,幫助大家更好的理解和學(xué)習(xí)MySQL,感興趣的朋友可以了解下
    2020-08-08
  • 淺談mysql 針對單張表的備份與還原

    淺談mysql 針對單張表的備份與還原

    下面小編就為大家?guī)硪黄獪\談mysql 針對單張表的備份與還原。小編覺得挺不錯的,現(xiàn)在就分享給大家,也給大家做個參考。一起跟隨小編過來看看吧
    2017-03-03
  • mysql myisam 優(yōu)化設(shè)置設(shè)置

    mysql myisam 優(yōu)化設(shè)置設(shè)置

    mysql myisam 優(yōu)化設(shè)置設(shè)置,需要的朋友可以參考下。
    2010-03-03
  • MySQL中的MVCC底層原理解讀

    MySQL中的MVCC底層原理解讀

    本文詳細(xì)介紹了MySQL中的多版本并發(fā)控制(MVCC)機制,包括版本鏈、ReadView以及在不同事務(wù)隔離級別下MVCC的工作原理,通過一個具體的示例演示了在可重復(fù)讀隔離級別下的MVCC執(zhí)行過程
    2025-02-02
  • 定位和優(yōu)化mysql慢查詢的常見方法分享

    定位和優(yōu)化mysql慢查詢的常見方法分享

    MySQL中的慢查詢(Slow Query)指執(zhí)行時間超過指定閾值的查詢語句,默認(rèn)閾值是long_query_time參數(shù)設(shè)置的秒值,MySQL有幾種常見的方法可以發(fā)現(xiàn)和獲取慢查詢,接下來小編將給大家詳細(xì)的介紹一下這些方法,需要的朋友可以參考下
    2023-08-08
  • MySQL的MaxIdleConns不合理,會變成短連接的原因

    MySQL的MaxIdleConns不合理,會變成短連接的原因

    這篇文章主要介紹了MySQL的MaxIdleConns不合理,會變成短連接的原因,幫助大家更好的理解和使用MySQL數(shù)據(jù)庫,感興趣的朋友可以了解下
    2021-01-01
  • mysql批量插入insert語句的兩種方法

    mysql批量插入insert語句的兩種方法

    在MySQL中批量插入數(shù)據(jù)有幾種方法,本文主要介紹了mysql批量插入insert語句的兩種方法,具有一定的參考價值,感興趣的可以了解一下
    2023-11-11
  • MySQL ORDER BY 的實現(xiàn)分析

    MySQL ORDER BY 的實現(xiàn)分析

    總的來說,在 MySQL 中的ORDER BY有兩種排序?qū)崿F(xiàn)方式,一種是利用有序索引獲取有序數(shù)據(jù),另一種則是通過相應(yīng)的排序算法,將取得的數(shù)據(jù)在內(nèi)存中進(jìn)行排序
    2012-07-07
  • MySQL和連接相關(guān)的timeout 的詳細(xì)整理

    MySQL和連接相關(guān)的timeout 的詳細(xì)整理

    這篇文章主要介紹了MySQL和連接相關(guān)的timeout 的詳細(xì)整理的相關(guān)資料,本文主要總結(jié)下和連接有關(guān)的timeout,需要的朋友可以參考下
    2017-08-08

最新評論

湄潭县| 蕉岭县| 来安县| 普兰县| 博客| 淳安县| 长乐市| 西华县| 东安县| 尉犁县| 府谷县| 张家口市| 武强县| 元阳县| 师宗县| 长垣县| 来安县| 迁西县| 易门县| 大田县| 孝义市| 舒兰市| 杭州市| 贵阳市| 太仓市| 库车县| 深圳市| 房产| 贵溪市| 秀山| 揭西县| 精河县| 东海县| 桃江县| 嘉峪关市| 遂溪县| 任丘市| 祥云县| 保亭| 讷河市| 方城县|