# redis-持久化-事務-鎖
[TOC]
## 一、redis持久化
### 1.概念
Redis提供了多種不同級別的持久化方式:RDB和AOF
1. RDB持久化:
指定的時間間隔內生成數據集的時間點快照(point-in-timesnapshot)。
2. AOF持久化:
記錄服務器執行的所有寫操作命令,并在服務器啟動時,通過重新執行這些命令來還原數據集。新命令會被追加到文件的末尾。Redis還會在AOF體積過大時在后臺對AOF文件進行重寫(rewrite),減小AOF文件的大小。
2. 同時持久化:
Redis還可以同時使用AOF持久化和RDB持久化。在這種情況下,當Redis重啟時,它會優先使用AOF文件來還原數據集,因為AOF文件保存的數據集通常比RDB文件所保存的數據集更完整。
### 2.RDB的優缺點
1. RDB的優點:
1)RDB是一個非常緊湊(compact)的文件,它保存了Redis在某個時間點上的數據集。這種文件非常適合用于進行備份。
2)RDB非常適用于災難恢復(disasterrecovery):它只有一個文件,并且內容都非常緊湊,可以(在加密后)將它傳送到別的數據中。
3)RDB可以最大化Redis的性能:父進程在保存RDB文件時唯一要做的就是fork出一個子進程,然后這個子進程就會處理接下來的所有保存工作,父進程無須執行任何磁盤I/O操作。
4)RDB在恢復大數據集時的速度比AOF的恢復速度要快。
2. DB的缺點
1)由于每次保存都會有時間間隔,所以如果恢復數據可能丟失最近未保存的數據
2)每次保存RDB的時候,Redis都要fork()出一個子進程,并由子進程來進行持久化工作。在數據集比較龐大時,fork()可能會非常耗時和消耗CPU資源。
### 3.AOF的優缺點
1. AOF的優點
1)使用AOF持久化會讓Redis變得非常耐久:AOF的默認策略為每秒鐘fsync一次,在這種配置下,Redis仍然可以保持良好的性能,并且就算發生故障停機,也最多只會丟失一秒鐘的數據。
2)AOF文件是一個只進行追加操作的日志文件(appendonlylog),因此對AOF文件的寫入不需要進行seek,即使日志因為某些原因而包含了未寫入完整的命令(比如寫入時磁盤已滿,寫入中途停機,等等),redis-check-aof工具也可以輕易地修復這種問題。
3)Redis可以在AOF文件體積變得過大時,自動地在后臺對AOF進行重寫:重寫后的新AOF文件包含了恢復當前數據集所需的最小命令集合。整個重寫操作是絕對安全的,用臨時文件的方式,成功后才覆蓋。
4)AOF文件有序地保存了對數據庫執行的所有寫入操作,這些寫入操作以Redis協議的格式保存,因此AOF文件的內容非常容易被人讀懂,對文件進行分析(parse)也很輕松。
5)導出(export)AOF文件也非常簡單:舉個例子,如果你不小心執行了FLUSHALL命令,但只要AOF文件未被重寫,那么只要停止服務器,移除AOF文件末尾的FLUSHALL命令,并重啟Redis,就可以將數據集恢復到FLUSHALL執行之前的狀態。
2. AOF的缺點
1)對于相同的數據集來說,AOF文件的體積通常要大于RDB文件的體積。
2)AOF文件恢復時間比RDB長
2)根據所使用的fsync策略,AOF的速度可能會慢于RDB。
### 4.總結
1. redis 持久化方式有哪些?有什么區別?
rdb:基于快照的持久化,速度更快,一般用作備份,主從復制也是依賴于rdb持久化功能
aof:以追加的方式記錄redis操作日志的文件。可以最大程度的保證redis數據安全,類似于mysql的binlog
2. RDB和AOF怎么選
一般來說,如果想達到足以媲美關系型數據庫的數據安全性,應該同時使用兩種持久化功能。
如果你非常關心你的數據,但仍然可以承受數分鐘以內的數據丟失,那么你可以只使用RDB持久化。反之則使用AOF
可以采用mysql主從復制的思路,在主庫上關閉持久化,用從庫來進行持久化操作
## 二、持久化配置
### 1.RDB持久化
1) 基礎配置
```sh
save 900 1
save 300 10
save 60 10000
```
配置分別表示:當達到以下定義的配置時間時,就將內存數據持久化到磁盤
900秒(15分鐘)內有1個更改
300秒(5分鐘)內有10個更改
60秒內有10000個更改
2) 高級配置
```sh
stop-writes-on-bgsave-error yes
rdbcompression yes
rdbchecksum yes
dbfilename dump.rdb
dir ./xxx
```
配置分別表示:
后臺備份進程出錯時,主進程停不停止寫入? 主進程不停止容易造成數據不一致
導出的rdb文件是否壓縮 如果rdb的大小很大的話建議這么做
導入rbd恢復時數據時,要不要檢驗rdb的完整性 驗證版本是不是一致
導出來的rdb文件名
rdb的放置路徑
### 2.AOF持久化
1) 基礎配置
```sh
appendonly yes/no
appendfsync always| everysec| no
```
配置分別表示:
是否打開aof日志功能
什么時候同步aof,[每1個命令|每秒|交給系統自動]寫入到aof
2) 高級配置
```sh
no-appendfsync-on-rewrite yes/no
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb
```
配置分別表示:
正在導出rdb快照的過程中,要不要停止同步aof
aof文件大小比起上次重寫時的大小,增長率100%時重寫,缺點:業務開始的時候,會重復重寫多次。
aof文件,至少超過64M時,重寫
## 三、RDB切換AOF
\在 Redis 2.2 或以上版本,可以在不重啟的情況下,從 RDB 切換到 AOF,最好先手動備份dump.rdb文件,然后執行以下命令。
```sh
redis-cli> CONFIG SET appendonly yes
redis-cli> CONFIG SET save ""
```
修改后可以需要驗證數據庫的鍵的數量沒有改變,寫命令會被正確地追加到 AOF 文件的末尾
## 四、事務和鎖
### 1.redis事務
redis中的事務跟關系型數據庫中的事務是一個相似的概念,不同之處是關系型數據庫每條語句都執行了,只是執行結果再未落盤,而redis中的事務是將多個操作命令記錄下來,等提交時一起執行。
redis中開啟一個事務是使用multi,exec提交事務,discard取消隊列命令(非回滾操作)。
1) 事務命令
* DISCARD
取消事務,放棄執行事務塊內的所有命令。
* EXEC
執行所有事務塊內的命令。
* MULTI
標記一個事務塊的開始。
* UNWATCH
取消 WATCH 命令對所有 key 的監視。
* WATCH key [key ...]
監視一個(或多個) key ,如果在事務執行之前這個(或這些) key 被其他命令所改動,那么事務將被打斷。
2) 命令舉例
* 文字說明
```sh
multi
command1
command2
command3
command4
```
4條語句作為一個組,并沒有真正執行,而是被放入同一隊列中。如果,這是執行discard,會直接丟棄隊列中所有的命令,而不是做回滾。
```sh
exec
```
當執行exec時,對列中所有操作,要么全成功要么全失敗
* 實際操作
```sh
root@xxx ~]# 127.0.0.1:6379> set a b
OK
root@xxx ~]# 127.0.0.1:6379> MULTI
OK
root@xxx ~]# 127.0.0.1:6379> set a b
QUEUED
root@xxx ~]# 127.0.0.1:6379> set c d
QUEUED
root@xxx ~]# 127.0.0.1:6379> exec
1) OK
2) OK
```
可以看到,執行了exec命令后,前兩條命令才一起執行
### 2.redis鎖[樂觀鎖]
redis支持樂觀鎖,也就是說,在最后提交時,才確定數據導致能不能執行
以買票來舉例如下:
我正在買票,在我下單時,發現還有一張票,我現在下單[開始事務],redis并不把這個票給我鎖起來,而是等我需要付款[提交事務],才去再次確定是否還有票,如果有我就可以用,如果沒有就提交失敗
- shell編程
- 變量1-規范-環境變量-普通變量
- 變量2-位置-狀態-特殊變量
- 變量3-變量子串
- 變量4-變量賦值三種方法
- 變量5-數組相關
- 計算1-數值計算命令和案例
- 計算2-expr命令舉例
- 計算3-條件表達式和各種操作符
- 計算4-條件表達式和操作符案例
- 循環1-函數的概念與作用
- 循環2-if與case語法
- 循環3-while語法
- 循環4-for循環
- 其他1-判斷傳入的參數為0或整數的多種思路
- 其他2-while+read按行讀取文件
- 其他3-給輸出內容加顏色
- 其他4-shell腳本后臺運行知識
- 其他5-6種產生隨機數的方法
- 其他6-break,continue,exit,return區別
- if語法案例
- case語法案例
- 函數語法案例
- WEB服務軟件
- nginx相關
- 01-簡介與對比
- 02-日志說明
- 03-配置文件和虛擬主機
- 04-location模塊和訪問控制
- 05-status狀態模塊
- 06-rewrite重寫模塊
- 07-負載均衡和反向代理
- 08-反向代理監控虛擬IP地址
- nginx與https自簽發證書
- php-nginx-mysql聯動
- Nginx編譯安裝[1.12.2]
- 案例
- 不同客戶端顯示不同信息
- 上傳和訪問資源池分離
- 配置文件
- nginx轉發解決跨域問題
- 反向代理典型配置
- php相關
- C6編譯安裝php.5.5.32
- C7編譯php5
- C6/7yum安裝PHP指定版本
- tomcxat相關
- 01-jkd與tomcat部署
- 02-目錄-日志-配置文件介紹
- 03-tomcat配置文件詳解
- 04-tomcat多實例和集群
- 05-tomcat監控和調優
- 06-Tomcat安全管理規范
- show-busy-java-threads腳本
- LVS與keepalived
- keepalived
- keepalived介紹和部署
- keepalived腦裂控制
- keepalived與nginx聯動-監控
- keepalived與nginx聯動-雙主
- LVS負載均衡
- 01-LVS相關概念
- 02-LVS部署實踐-ipvsadm
- 03-LVS+keepalived部署實踐
- 04-LVS的一些問題和思路
- mysql數據庫
- 配置和腳本
- 5.6基礎my.cnf
- 5.7基礎my.cnf
- 多種安裝方式
- 詳細用法和命令
- 高可用和讀寫分離
- 優化和壓測
- docker與k8s
- docker容器技術
- 1-容器和docker基礎知識
- 2-docker軟件部署
- 3-docker基礎操作命令
- 4-數據的持久化和共享互連
- 5-docker鏡像構建
- 6-docker鏡像倉庫和標簽tag
- 7-docker容器的網絡通信
- 9-企業級私有倉庫harbor
- docker單機編排技術
- 1-docker-compose快速入門
- 2-compose命令和yaml模板
- 3-docker-compose命令
- 4-compose/stack/swarm集群
- 5-命令補全和資源限制
- k8s容器編排工具
- mvn的dockerfile打包插件
- openstack與KVM
- kvm虛擬化
- 1-KVM基礎與快速部署
- 2-KVM日常管理命令
- 3-磁盤格式-快照和克隆
- 4-橋接網絡-熱添加與熱遷移
- openstack云平臺
- 1-openstack基礎知識
- 2-搭建環境準備
- 3-keystone認證服務部署
- 4-glance鏡像服務部署
- 5-nova計算服務部署
- 6-neutron網絡服務部署
- 7-horizon儀表盤服務部署
- 8-啟動openstack實例
- 9-添加計算節點流程
- 10-遷移glance鏡像服務
- 11-cinder塊存儲服務部署
- 12-cinder服務支持NFS存儲
- 13-新增一個網絡類型
- 14-云主機冷遷移前提設置
- 15-VXALN網絡類型配置
- 未分類雜項
- 部署環境準備
- 監控
- https證書
- python3.6編譯安裝
- 編譯安裝curl[7.59.0]
- 修改Redhat7默認yum源為阿里云
- 升級glibc至2.17
- rabbitmq安裝和啟動
- rabbitmq多實例部署[命令方式]
- mysql5.6基礎my.cnf
- centos6[upstart]/7[systemd]創建守護進程
- Java啟動參數詳解
- 權限控制方案
- app發包倉庫
- 版本發布流程
- elk日志系統
- rsyslog日志統一收集系統
- ELK系統介紹及YUM源
- 快速安裝部署ELK
- Filebeat模塊講解
- logstash的in/output模塊
- logstash的filter模塊
- Elasticsearch相關操作
- ES6.X集群及head插件
- elk收集nginx日志(json格式)
- kibana說明-漢化-安全
- ES安裝IK分詞器
- zabbix監控
- zabbix自動注冊模板實現監控項自動注冊
- hadoop大數據集群
- hadoop部署
- https證書
- certbot網站
- jenkins與CI/CD
- 01-Jenkins部署和初始化
- 02-Jenkins三種插件安裝方式
- 03-Jenkins目錄說明和備份
- 04-git與gitlab項目準備
- 05-構建自由風格項目和相關知識
- 06-構建html靜態網頁項目
- 07-gitlab自動觸發項目構建
- 08-pipelinel流水線構建項目
- 09-用maven構建java項目
- iptables
- 01-知識概念
- 02-常規命令實戰
- 03-企業應用模板
- 04-企業應用模板[1鍵腳本]
- 05-企業案例-共享上網和端口映射
- SSH與VPN
- 常用VPN
- VPN概念和常用軟件
- VPN之PPTP部署[6.x][7.x]
- 使用docker部署softether vpn
- softEther-vpn靜態路由表推送
- SSH服務
- SSH介紹和部署
- SSH批量分發腳本
- 開啟sftp日志并限制sftp訪問目錄
- sftp賬號權限分離-開發平臺
- ssh配置文件最佳實踐
- git-github-gitlab
- git安裝部署
- git詳細用法
- github使用說明
- gitlab部署和使用
- 緩存數據庫
- zookeeper草稿
- mongodb數據庫系列
- mongodb基本使用
- mongodb常用命令
- MongoDB配置文件詳解
- mongodb用戶認證管理
- mongodb備份與恢復
- mongodb復制集群
- mongodb分片集群
- docker部署mongodb
- memcached
- memcached基本概念
- memcached部署[6.x][7.x]
- memcached參數和命令
- memcached狀態和監控
- 會話共享和集群-優化-持久化
- memcached客戶端-web端
- PHP測試代碼
- redis
- 1安裝和使用
- 2持久化-事務-鎖
- 3數據類型和發布訂閱
- 4主從復制和高可用
- 5redis集群
- 6工具-安全-pythonl連接
- redis配置文件詳解
- 磁盤管理和存儲
- Glusterfs分布式存儲
- GlusterFS 4.1 版本選擇和部署
- Glusterfs常用命令整理
- GlusterFS 4.1 深入使用
- NFS文件存儲
- NFS操作和部署
- NFS文件系統-掛載和優化
- sersync與inotify
- rsync同步服務
- rsyncd.conf
- rsync操作和部署文檔
- rsync常見錯誤處理
- inotify+sersync同步服務
- inotify安裝部署
- inotify最佳腳本
- sersync安裝部署
- 時間服務ntp和chrony
- 時間服務器部署
- 修改utc時間為cst時間
- 批量操作與自動化
- cobbler與kickstart
- KS+COBBLER文件
- cobbler部署[7.x]
- kickstart部署[7.x]
- kickstar-KS文件和語法解析
- kickstart-PXE配置文件解析
- 自動化之ansible
- ansible部署和實踐
- ansible劇本編寫規范
- 配置文件示例
- 內網DNS服務
- 壓力測試
- 壓測工具-qpefr測試帶寬和延時