⑴ mysql讀寫分離和用Redis做緩存,這兩種方案有什麼異同
讀寫分離一般都是結合Master/Slave模式使用,Master處理寫請求,Slave處理讀請求,這樣做的好處是:1、提高資料庫的並發處理能力;
2、避免寫請求鎖表阻塞讀請求;
3、避免單點,提高資料庫的可用性;
而使用Redis作為DB前面的緩存,是為了減少對MySQL的壓力,提高系統的處理效率。
二者解決的問題域不同,不存在誰替代誰。
一般高並發應用都是結合二者使用。
⑵ redis怎麼實現資料庫的緩存
大致為兩種措施:
一、腳本同步:
1、自己寫腳本將資料庫數據寫入到redis/memcached。
2、這就涉及到實時數據變更的問題(mysql row binlog的實時分析),binlog增量訂閱Alibaba 的canal ,以及緩存層數據 丟失/失效 後的數據同步恢復問題。
二、業務層實現:
1、先讀取nosql緩存層,沒有數據再讀取mysql層,並寫入數據到nosql。
2、nosql層做好多節點分布式(一致性hash),以及節點失效後替代方案(多層hash尋找相鄰替代節點),和數據震盪恢復了。
⑶ 如何使用redis做mysql的緩存
應用Redis實現數據的讀寫,同時利用隊列處理器定時將數據寫入MySQL。
同時要注意避免沖突,在redis啟動時去mysql讀取所有表鍵值存入redis中,往redis寫數據時,對redis主鍵自增並進行讀取,若mysql更新失敗,則需要及時清除緩存及同步redis主鍵。
這樣處理,主要是實時讀寫redis,而mysql數據則通過隊列非同步處理,緩解mysql壓力,不過這種方法應用場景主要基於高並發,而且redis的高可用集群架構相對更復雜,一般不是很推薦。
《內存資料庫和mysql的同步機制》
redis如何做到和mysql資料庫的同步
【方案一】http://www.hu.com/question/23401553?sort=created
程序實現mysql更新、添加、刪除就刪除redis數據。
程序查詢redis,不存在就查詢mysql並保存redis
redis和mysql數據的同步,代碼級別大致可以這樣做:
讀: 讀redis->沒有,讀mysql->把mysql數據寫回redis
寫: 寫mysql->成功,寫redis(捕捉所有mysql的修改,寫入和刪除事件,對redis進行操作)
【方案二】http://www.linuxidc.com/Linux/2015-01/380.htm
實時獲取mysql binlog進行解析,然後修改redis
MySQL到Redis數據方案
無論MySQL還是Redis,自身都帶有數據同步的機制,像比較常用的MySQL的Master/Slave模式,就是由Slave端分析Master的binlog來實現的,這樣的數據其實還是一個非同步過程,只不過當伺服器都在同一內網時,非同步的延遲幾乎可以忽略。
那麼理論上我們也可以用同樣方式,分析MySQL的binlog文件並將數據插入Redis。但是這需要對binlog文件以及MySQL有非常深入的理解,同時由於binlog存在Statement/Row/Mixedlevel多種形式,分析binlog實現同步的工作量是非常大的。
因此這里選擇了一種開發成本更加低廉的方式,借用已經比較成熟的MySQL UDF,將MySQL數據首先放入Gearman中,然後通過一個自己編寫的PHP Gearman Worker,將數據同步到Redis。比分析binlog的方式增加了不少流程,但是實現成本更低,更容易操作。
【方案三】
使用mysql的udf,詳情請看MySQL :: MySQL 5.1 Reference Manual :: 22.3 Adding New Functions to MySQL 然後通過trigger在表update和insert之後進行函數的調用,寫入到redis中去。大致是這個樣子。
【http://www.hu.com/question/27738066】
1.首先明確是不是一定要上緩存,當前架構的瓶頸在哪裡,若瓶頸真是資料庫操作上,再繼續往下看。
2.明確memcached和redis的區別,到底要使用哪個。前者終究是個緩存,不可能永久保存數據(LRU機制),支持分布式,後者除了緩存的同時也支持把數據持久化到磁碟等,redis要自己去實現分布式緩存(貌似最新版本的已集成),自己去實現一致性hash。因為不知道你們的應用場景,不好說一定要用memcache還是redis,說不定用MongoDB會更好,比如在存儲日誌方面。
3.緩存量大但又不常變化的數據,比如評論。
4.你的思路是對的,清晰明了,讀DB前,先讀緩存,如果有直接返回,如果沒有再讀DB,然後寫入緩存層並返回。
5.考慮是否需要主從,讀寫分離,考慮是否分布式部署,考慮是否後續水平伸縮。
6.想要一勞永逸,後續維護和擴展方便,那就將現有的代碼架構優化,按你說的替換資料庫組件需要改動大量代碼,說明當前架構存在問題。可以利用現有的一些框架,比如SpringMVC,將你的應用層和業務層和資料庫層解耦。再上緩存之前把這些做好。
7.把讀取緩存等操作做成服務組件,對業務層提供服務,業務層對應用層提供服務。
8.保留原始資料庫組件,優化成服務組件,方便後續業務層靈活調用緩存或者是資料庫。
9.不建議一次性全量上緩存,最開始不動核心業務,可以將邊緣業務先換成緩存組件,一步步換至核心業務。
10.刷新內存,以memcached為例,新增,修改和刪除操作,一般採用lazy load的策略,即新增時只寫入資料庫,並不會馬上更新Memcached,而是等到再次讀取時才會載入到Memcached中,修改和刪除操作也是更新資料庫,然後將Memcached中的數據標記為失效,等待下次讀取時再載入。
⑷ Redis 用作視頻的緩沖怎麼弄
對redis來說,value是二進制安全的,可以直接set到內存中,直接寫就行了,不過注意redis的容量大小!
⑸ 一個面試問題,為什麼用redis做緩存
redis不是資料庫,只是一種緩存軟體,為了緩解伺服器頻繁讀資料庫帶來的內存資源消耗,redis將需要和資料庫交互的信息暫存,當下次同樣的http請求,就能直接讀取redis裡面的內容,而不用讀資料庫。
這樣減少了資料庫壓力又能提高伺服器響應時間。
⑹ 接收訂單用redis做緩存好還是rabbit做消息隊列好
具體對比
可靠消費
Redis:沒有相應的機制保證消息的消費,當消費者消費失敗的時候,消息體丟失,需要手動處理
RabbitMQ:具有消息消費確認,即使消費者消費失敗,也會自動使消息體返回原隊列,同時可全程持久化,保證消息體被正確消費
可靠發布
Reids:不提供,需自行實現
RabbitMQ:具有發布確認功能,保證消息被發布到伺服器
高可用
Redis:採用主從模式,讀寫分離,但是故障轉移還沒有非常完善的官方解決方案
RabbitMQ:集群採用磁碟、內存節點,任意單點故障都不會影響整個隊列的操作
持久化
Redis:將整個Redis實例持久化到磁碟
RabbitMQ:隊列,消息,都可以選擇是否持久化
消費者負載均衡
Redis:不提供,需自行實現
RabbitMQ:根據消費者情況,進行消息的均衡分發
隊列監控
Redis:不提供,需自行實現
RabbitMQ:後台可以監控某個隊列的所有信息,(內存,磁碟,消費者,生產者,速率等)
流量控制
Redis:不提供,需自行實現
RabbitMQ:伺服器過載的情況,對生產者速率會進行限制,保證服務可靠性
出入隊性能
對於RabbitMQ和Redis的入隊和出隊操作,各執行100萬次,每10萬次記錄一次執行時間。
測試數據分為128Bytes、512Bytes、1K和10K四個不同大小的數據。
⑺ redis做緩存,怎麼更新裡面的數據
代碼如下,思路也清晰。讀寫部分if(redis){讀取redis數據}else{資料庫讀取,存redis+設置超時時間}更新部分if(資料庫update){更新redis+設置超時時間}
⑻ 現在想用redis做圖片數據的緩存 准備用set key為圖片的id value為圖片數據 (2進
存redis是不是有點太浪費了,如果圖片不多,可以把圖片base64編碼放到redis里,取出時再base64解碼,另外圖片存磁碟,value為圖片路徑也可以
⑼ redis除了緩存還可以做什麼
1、緩存僅僅是redis的一個小的方面
2、你要明白redis是非關系型內存資料庫,他有著豐富的數據類型:string,list,hash,set,zset
3、有足夠的money,你完全可以將redis作為主存
4、redis可以做的很多,比如:投票系統,用戶登錄session,購物車,網頁緩存,日誌系統,搜索引擎,消息隊列。