Centos7 下Redis3安裝
- 2020 年 1 月 11 日
- 筆記
Redis官網 http://redis.io
中文手冊 http://www.cnblogs.com/stephen-liu74/archive/2012/02/27/2370212.html
一、 下載redis最新版
下載 http://redis.io/download
目前最新版 redis3.2.11
cd /usr/local/src
wget http://download.redis.io/releases/redis-3.2.11.tar.gz
二、 編譯安裝redis (詳情可見源碼根目錄的 README)
tar -zxvf redis-3.2.11.tar.gz
cd redis-3.2.11
make
make命令執行完成後,會在src目錄下生成6個可執行文件,分別是redis-server、redis-cli、redis-benchmark、redis-check-aof、redis-check-dump、redis-sentinel,它們的作用如下:
redis-server:Redis伺服器的daemon啟動程式
redis-cli:Redis命令行操作工具。當然,你也可以用telnet根據其純文本協議來操作
redis-benchmark:Redis性能測試工具,測試Redis在你的系統及你的配置下的讀寫性能
redis-check-aof:更新日誌檢查
redis-check-dump:用於本地資料庫檢查
redis-sentinel:集群管理工具
安裝:
make PREFIX=/usr/local/redis install
測試
make test
依賴 tcl,若沒有安裝請先安裝
yum -y install tcl tcl-devel
三、 配置 Redis
mkdir -p /usr/local/redis/etc /usr/local/redis/log /usr/local/redis/data #創建配置文件、日誌文件、資料庫保存目錄
cp /usr/local/src/redis-3.2.11/redis.conf /usr/local/redis/etc/
touch /usr/local/redis/log/redis.log
1. redis.conf 配置參數:
#是否作為守護進程運行
daemonize yes
#如以後台進程運行,則需指定一個pid,默認為/var/run/redis.pid
pidfile /var/run/redis.pid
#綁定主機IP,默認值為127.0.0.1
bind 0.0.0.0
#Redis默認監聽埠
port 6379
#客戶端閑置多少秒後,斷開連接,默認為300(秒)
timeout 300
#日誌記錄等級,有4個可選值,debug,verbose,notice(默認值),warning
loglevel notice
#指定日誌輸出的文件名,默認值為stdout,也可設為/dev/null屏蔽日誌
logfile "/usr/local/redis/log/redis.log"
#可用資料庫數,默認值為16,默認資料庫為0
databases 16
#保存數據到disk的策略
#當有一條Keys數據被改變是,900秒刷新到disk一次
save 900 1
#當有10條Keys數據被改變時,300秒刷新到disk一次
save 300 10
#當有1w條keys數據被改變時,60秒刷新到disk一次
save 60 10000
#當dump .rdb資料庫的時候是否壓縮數據對象
rdbcompression yes
#本地資料庫文件名,默認值為dump.rdb
dbfilename dump.rdb
#本地資料庫存放路徑,默認值為 ./
dir /usr/local/redis/data
# 設置PID文件目錄
pidfile /usr/local/redis/redis.pid
########### Replication #####################
#Redis的複製配置
# slaveof <masterip> <masterport> 當本機為從服務時,設置主服務的IP及埠
# masterauth <master-password> 當本機為從服務時,設置主服務的連接密碼
#連接密碼
requirepass foobared
#最大客戶端連接數
maxclients 30000
#最大記憶體使用設置,達到最大記憶體設置後,Redis會先嘗試清除已到期或即將到期的Key,當此方法處理後,任到達最大記憶體設置,將無法再進行寫入操作。
# maxmemory <bytes>
#是否在每次更新操作後進行日誌記錄,如果不開啟,可能會在斷電時導致一段時間內的數據丟失。因為redis本身同步數據文件是按上面save條件來同步的,所以有的數據會在一段時間內只存在於記憶體中。默認值為no
appendonly no
#更新日誌文件名,默認值為appendonly.aof
#appendfilename
#更新日誌條件,共有3個可選值。no表示等作業系統進行數據快取同步到磁碟,always表示每次更新操作後手動調用fsync()將數據寫到磁碟,everysec表示每秒同步一次(默認值)。
# appendfsync always
appendfsync everysec
# appendfsync no
################ VIRTUAL MEMORY ###########
#是否開啟VM功能,默認值為no
vm-enabled no
# vm-enabled yes
#虛擬記憶體文件路徑,默認值為/tmp/redis.swap,不可多個Redis實例共享
vm-swap-file /tmp/redis.swap
# 將所有大於vm-max-memory的數據存入虛擬記憶體,無論vm-max-memory設置多小,所有索引數據都是記憶體存儲的 (Redis的索引數據就是keys),也就是說,當vm-max-memory設置為0的時候,其實是所有value都存在於磁碟。默認值為0。
vm-max-memory 0
vm-page-size 32
vm-pages 134217728
vm-max-threads 4
############# ADVANCED CONFIG ###############
glueoutputbuf yes
hash-max-zipmap-entries 64
hash-max-zipmap-value 512
#是否重置Hash表
activerehashing yes
注意:Redis官方文檔對VM的使用提出了一些建議:
當你的key很小而value很大時,使用VM的效果會比較好.因為這樣節約的記憶體比較大.
當你的key不小時,可以考慮使用一些非常方法將很大的key變成很大的value,比如你可以考慮將key,value組合成一個新的value.
最好使用linux ext3 等對稀疏文件支援比較好的文件系統保存你的swap文件.
vm-max-threads這個參數,可以設置訪問swap文件的執行緒數,設置最好不要超過機器的核數.如果設置為0,那麼所有對swap文件的操作都是串列的.可能會造成比較長時間的延遲,但是對數據完整性有很好的保證.
2. 調整系統內核參數
如果記憶體情況比較緊張的話,需要設定內核參數:
echo 1 > /proc/sys/vm/overcommit_memory
這裡說一下這個配置的含義:/proc/sys/vm/overcommit_memory
該文件指定了內核針對記憶體分配的策略,其值可以是0、1、2。
0,表示內核將檢查是否有足夠的可用記憶體供應用進程使用;如果有足夠的可用記憶體,記憶體申請允許;否則,記憶體申請失敗,並把錯誤返回給應用進程。
1,表示內核允許分配所有的物理記憶體,而不管當前的記憶體狀態如何。
2,表示內核允許分配超過所有物理記憶體和交換空間總和的記憶體
Redis 在dump數據的時候,會fork出一個子進程,理論上child進程所佔用的記憶體和parent是一樣的,比如parent佔用的記憶體為 8G,這個時候也要同樣分配8G的記憶體給child, 如果記憶體無法負擔,往往會造成redis伺服器的down機或者IO負載過高,效率下降。所以這裡比較優化的記憶體分配策略應該設置為 1(表示內核允許分配所有的物理記憶體,而不管當前的記憶體狀態如何)
四. 運行 Redis
添加環境變數
echo "export PATH=$PATH:/usr/local/redis/bin" >> /etc/profile
. /etc/profile
1. 運行服務
redis-server /etc/redis/redis.conf
即可在後台啟動redis服務,確認運行了之後,可以用redis-benchmark命令測試看看,還可以通過redis-cli命令實際操作一下,比如:
redis-cli set foo bar
OK
redis-cli get foo
bar
2. 關閉服務
redis-cli shutdown
如果埠變化可以指定埠:
redis-cli -p 6380 shutdown
3. 保存/備份
數據備份可以通過定期備份該文件實現。
因為redis是非同步寫入磁碟的,如果要讓記憶體中的數據馬上寫入硬碟可以執行如下命令:
redis-cli save 或者 redis-cli -p 6380 save(指定埠)
注意,以上部署操作需要具備一定的許可權,比如複製和設定內核參數等。
執行redis-benchmark命令時也會將記憶體數據寫入硬碟。
4. 同步機制
redis實現的同步機制相對簡單,缺少同步機制常見的check point和校驗機制。
在 運行時,如果master -> slave同步請求轉發被丟棄, slave將無法恢復該請求的相關資訊,直到slave重啟時從master全量載入數據時才能修復。因此,建議使用redis盡量利用其 key/value和value支援多種類型的特性,存儲一些相對不重要的數據。
五. 設置隨機啟動
vi /etc/init.d/redis #添加以下內容
#!/bin/bash # # redis - this script starts and stops the redis-server daemon # # chkconfig: - 80 12 # description: Redis is a persistent key-value database # processname: redis-server # config: /etc/redis/redis.conf # pidfile: /var/run/redis.pid
source /etc/init.d/functions
BIN="/usr/local/redis/bin" CONFIG="/usr/local/redis/etc/redis.conf" PIDFILE="/usr/local/redis/redis.pid"
### Read configuration [ -r "$SYSCONFIG" ] && source "$SYSCONFIG" RETVAL=0 prog="redis-server" desc="Redis Server"
start() { if [ -e $PIDFILE ];then echo "$desc already running...." exit 1 fi echo -n $"Starting $desc: " daemon $BIN/$prog $CONFIG RETVAL=$? echo [ $RETVAL -eq 0 ] && touch /var/lock/subsys/$prog return $RETVAL }
stop() { echo -n $"Stop $desc: " killproc $prog RETVAL=$? echo [ $RETVAL -eq 0 ] && rm -f /var/lock/subsys/$prog $PIDFILE return $RETVAL }
restart() { stop start }
case "$1" in start) start ;; stop) stop ;; restart) restart ;; condrestart) [ -e /var/lock/subsys/$prog ] && restart RETVAL=$? ;; status) status $prog RETVAL=$? ;; *) echo $"Usage: $0 {start|stop|restart|condrestart|status}" RETVAL=1 esac exit $RETVAL
用這個腳本管理之前,需要先配置下面的內核參數,否則Redis腳本在重啟或停止redis時,可能會報錯,並且不能自動在停止服務前同步數據到磁碟上:
vi /etc/sysctl.conf
vm.overcommit_memory = 1
然後應用生效:
sysctl -p
(調整記憶體(如果記憶體情況比較緊張的話,需要設定內核參數) echo 1 > /proc/sys/vm/overcommit_memory 說明: 該文件指定了內核針對記憶體分配的策略,其值可以是0、1、2。 0 表示內核將檢查是否有足夠的可用記憶體供應用進程使用;如果有足夠的可用記憶體,記憶體申請允許;否則,記憶體申請失敗,並把錯誤返回給應用進程。 1 表示內核允許分配所有的物理記憶體,而不管當前的記憶體狀態如何。 2 表示內核允許分配超過所有物理記憶體和交換空間總和的記憶體 )
然後增加服務並開機自啟動:
chmod 755 /etc/init.d/redis
chkconfig redis on
chkconfig --list redis
centos 7 啟動腳本
/usr/lib/systemd/system/redis.service
#####################################
[Unit]
Description=Startup script for the Redis
Documentation=http://redis.io
After=network.target remote-fs.target nss-lookup.target
[Service]
Type=forking
PIDFile=/usr/local/redis/redis.pid
ExecStart=/usr/local/redis/bin/redis-server /usr/local/redis/etc/redis.conf
ExecReload=/bin/kill -s HUP $MAINPID
ExecStop=/bin/kill -s QUIT $MAINPID
PrivateTmp=true
[Install]
WantedBy=multi-user.target
####
指定運行用戶
useradd -M -s /sbin/nologin redis
chown -R redis:redis /usr/local/redis/log /usr/local/redis/data pidfile所在目錄
cat /usr/lib/systemd/system/redis.service
###
[Unit]
Description=Startup script for the Redis
Documentation=http://redis.io
After=network.target remote-fs.target nss-lookup.target
[Service]
User=redis
Group=redis
Type=forking
ExecStart=/usr/local/redis/bin/redis-server /usr/local/redis/etc/redis.conf
ExecReload=/bin/kill -s HUP $MAINPID
ExecStop=/bin/kill -s QUIT $MAINPID
PrivateTmp=true
[Install]
WantedBy=multi-user.target
###
systemctl enable redis; systemctl start redis