redis是什么:
Redis is an open source, BSD licensed, advanced key-value store. It is often referred to as a data structure server since keys can contain strings, hashes, lists, sets and sorted sets.
redis是開源,BSD許可,高級的key-value存儲系統(tǒng).
可以用來存儲字符串,哈希結(jié)構(gòu),鏈表,集合,因此,常用來提供數(shù)據(jù)結(jié)構(gòu)服務(wù).
redis和memcached相比,的獨特之處:
1: redis可以用來做存儲(storge), 而memccached是用來做緩存(cache)
這個特點主要因為其有”持久化”的功能.
2: 存儲的數(shù)據(jù)有”結(jié)構(gòu)”,對于memcached來說,存儲的數(shù)據(jù),只有1種類型--”字符串”,
而redis則可以存儲字符串,鏈表,哈希結(jié)構(gòu),集合,有序集合.
Redis下載安裝
1:官方站點: redis.io 下載最新版或者最新stable版
2:解壓源碼并進(jìn)入目錄
3: 不用configure
4: 直接make
(如果是32位機(jī)器 make 32bit)
注:易碰到的問題,時間錯誤.
原因: 源碼是官方configure過的,但官方configure時,生成的文件有時間戳信息,
Make只能發(fā)生在configure之后,
如果你的虛擬機(jī)的時間不對,比如說是2012年
解決: date -s ‘yyyy-mm-dd hh:mm:ss’ 重寫時間
再 clock -w 寫入cmos
5: 可選步驟: make test 測試編譯情況
(可能出現(xiàn): need tcl >8.4這種情況, yum install tcl)
6: 安裝到指定的目錄,比如 /usr/local/redis
make PREFIX=/usr/local/redis install
注: PREFIX要大寫
7: make install之后,得到如下幾個文件
redis-benchmark 性能測試工具
redis-check-aof 日志文件檢測工(比如斷電造成日志損壞,可以檢測并修復(fù))
redis-check-dump 快照文件檢測工具,效果類上
redis-cli 客戶端
redis-server 服務(wù)端
[圖片上傳失敗...(image-9f3067-1558439998608)]
8: 復(fù)制配置文件
Cp /path/redis.conf /usr/local/redis
9: 啟動與連接
/path/to/redis/bin/redis-server ./path/to/conf-file
例:[root@localhost redis]# ./bin/redis-server ./redis.conf
連接: 用redis-cli
/path/to/redis/bin/redis-cli [-h localhost -p 6379 ]
10: 讓redis以后臺進(jìn)程的形式運行
編輯conf配置文件,修改如下內(nèi)容;
daemonize yes
Redis對于key的操作命令
del key1 key2 ... Keyn
作用: 刪除1個或多個鍵
返回值: 不存在的key忽略掉,返回真正刪除的key的數(shù)量
rename key newkey
作用: 給key賦一個新的key名
注:如果newkey已存在,則newkey的原值被覆蓋
renamenx key newkey
作用: 把key改名為newkey
返回: 發(fā)生修改返回1,未發(fā)生修改返回0
注: nx--> not exists, 即, newkey不存在時,作改名動作
move key db
redis 127.0.0.1:6379[1]> select 2
OK
redis 127.0.0.1:6379[2]> keys *
(empty list or set)
redis 127.0.0.1:6379[2]> select 0
OK
redis 127.0.0.1:6379> keys *
"name"
"cc"
"a"
"b"
redis 127.0.0.1:6379> move cc 2
(integer) 1
redis 127.0.0.1:6379> select 2
OK
redis 127.0.0.1:6379[2]> keys *
- "cc"
redis 127.0.0.1:6379[2]> get cc
"3"
(注意: 一個redis進(jìn)程,打開了不止一個數(shù)據(jù)庫, 默認(rèn)打開16個數(shù)據(jù)庫,從0到15編號,
如果想打開更多數(shù)據(jù)庫,可以從配置文件修改)
keys pattern 查詢相應(yīng)的key
在redis里,允許模糊查詢key
*: 通配任意多個字符
?: 通配單個字符
redis 127.0.0.1:6379> flushdb
OK
redis 127.0.0.1:6379> keys *
(empty list or set)
redis 127.0.0.1:6379> mset one 1 two 2 three 3 four 4
OK
redis 127.0.0.1:6379> keys o*
- "one"
redis 127.0.0.1:6379> key *o
(error) ERR unknown command 'key'
redis 127.0.0.1:6379> keys *o
- "two"
redis 127.0.0.1:6379> keys ???
"one"
"two"
redis 127.0.0.1:6379> keys on?
- "one"
redis 127.0.0.1:6379> set ons yes
OK
redis 127.0.0.1:6379> keys on[eaw]
- "one"
randomkey 返回隨機(jī)key
exists key
判斷key是否存在,返回1/0
type key
返回key存儲的值的類型
有string,link,set,order set, hash
ttl key
作用: 查詢key的生命周期
返回: 秒數(shù)
注:對于不存在的key或已過期的key/不過期的key,都返回-1
Redis2.8中,對于不存在的key,返回-2
expire key 整型值
作用: 設(shè)置key的生命周期,以秒為單位
同理:
pexpire key 毫秒數(shù), 設(shè)置生命周期
pttl key, 以毫秒返回生命周期
persist key
作用: 把指定key置為永久有效
Redis字符串類型的操作
set key value [ex 秒數(shù)] / [px 毫秒數(shù)] [nx] /[xx]
如: set a 1 ex 10 , 10秒有效
Set a 1 px 9000 , 9秒有效
注: 如果ex,px同時寫,以后面的有效期為準(zhǔn)
如 set a 1 ex 100 px 9000, 實際有效期是9000毫秒
nx: 表示key不存在時,執(zhí)行操作
xx: 表示key存在時,執(zhí)行操作
mset multi set , 一次性設(shè)置多個鍵值
例: mset key1 v1 key2 v2 ....
get key
作用:獲取key的值
mget key1 key2 ..keyn
作用:獲取多個key的值
setrange key offset value
作用:把字符串的offset偏移字節(jié),改成value
redis 127.0.0.1:6379> set greet hello
OK
redis 127.0.0.1:6379> setrange greet 2 x
(integer) 5
redis 127.0.0.1:6379> get greet
"hexlo"
注意: 如果偏移量>字符長度, 該字符自動補(bǔ)0x00
redis 127.0.0.1:6379> setrange greet 6 !
(integer) 7
redis 127.0.0.1:6379> get greet
"heyyo\x00!"
append key value
作用: 把value追加到key的原值上
getrange key start stop
作用: 是獲取字符串中 [start, stop]范圍的值
注意: 對于字符串的下標(biāo),左數(shù)從0開始,右數(shù)從-1開始
redis 127.0.0.1:6379> set title 'chinese'
OK
redis 127.0.0.1:6379> getrange title 0 3
"chin"
redis 127.0.0.1:6379> getrange title 1 -2
"hines"
注意:
1: start>=length, 則返回空字符串
2: stop>=length,則截取至字符結(jié)尾
3: 如果start 所處位置在stop右邊, 返回空字符串
getset key newvalue
作用: 獲取并返回舊值,設(shè)置新值
redis 127.0.0.1:6379> set cnt 0
OK
redis 127.0.0.1:6379> getset cnt 1
"0"
redis 127.0.0.1:6379> getset cnt 2
"1"
incr key
作用: 指定的key的值加1,并返回加1后的值
注意:
1:不存在的key當(dāng)成0,再incr操作
2: 范圍為64有符號
incrby key number
redis 127.0.0.1:6379> incrby age 90
(integer) 92
incrbyfloat key floatnumber
redis 127.0.0.1:6379> incrbyfloat age 3.5
"95.5"
decr key
redis 127.0.0.1:6379> set age 20
OK
redis 127.0.0.1:6379> decr age
(integer) 19
decrby key number
redis 127.0.0.1:6379> decrby age 3
(integer) 16
getbit key offset
作用:獲取值的二進(jìn)制表示,對應(yīng)位上的值(從左,從0編號)
redis 127.0.0.1:6379> set char A
OK
redis 127.0.0.1:6379> getbit char 1
(integer) 1
redis 127.0.0.1:6379> getbit char 2
(integer) 0
redis 127.0.0.1:6379> getbit char 7
(integer) 1
setbit key offset value
設(shè)置offset對應(yīng)二進(jìn)制位上的值
返回: 該位上的舊值
注意:
1:如果offset過大,則會在中間填充0,
2: offset最大大到多少
3:offset最大2^32-1,可推出最大的的字符串為512M
bitop operation destkey key1 [key2 ...]
對key1,key2..keyN作operation,并將結(jié)果保存到 destkey 上。
operation 可以是 AND 、 OR 、 NOT 、 XOR
redis 127.0.0.1:6379> setbit lower 7 0
(integer) 0
redis 127.0.0.1:6379> setbit lower 2 1
(integer) 0
redis 127.0.0.1:6379> get lower
" "
redis 127.0.0.1:6379> set char Q
OK
redis 127.0.0.1:6379> get char
"Q"
redis 127.0.0.1:6379> bitop or char char lower
(integer) 1
redis 127.0.0.1:6379> get char
"q"
注意: 對于NOT操作, key不能多個
link 鏈表結(jié)構(gòu)
lpush key value
作用: 把值插入到鏈接頭部
rpop key
作用: 返回并刪除鏈表尾元素
rpush,lpop: 不解釋
lrange key start stop
作用: 返回鏈表中[start ,stop]中的元素
規(guī)律: 左數(shù)從0開始,右數(shù)從-1開始
lrem key count value
作用: 從key鏈表中刪除 value值
注: 刪除count的絕對值個value后結(jié)束
Count>0 從表頭刪除
Count<0 從表尾刪除
ltrim key start stop
作用: 剪切key對應(yīng)的鏈接,切[start,stop]一段,并把該段重新賦給key
lindex key index
作用: 返回index索引上的值,
如 lindex key 2
llen key
作用:計算鏈接表的元素個數(shù)
redis 127.0.0.1:6379> llen task
(integer) 3
redis 127.0.0.1:6379>
linsert key after|before search value
作用: 在key鏈表中尋找’search’,并在search值之前|之后,.插入value
注: 一旦找到一個search后,命令就結(jié)束了,因此不會插入多個value
rpoplpush source dest
作用: 把source的尾部拿出,放在dest的頭部,
并返回 該單元值
場景: task + bak 雙鏈表完成安全隊列
Task列表 bak列表
| | | |
| | | |
業(yè)務(wù)邏輯:
1:Rpoplpush task bak
2:接收返回值,并做業(yè)務(wù)處理
3:如果成功,rpop bak 清除任務(wù). 如不成功,下次從bak表里取任務(wù)
brpop ,blpop key timeout
作用:等待彈出key的尾/頭元素,
Timeout為等待超時時間
如果timeout為0,則一直等待
場景: 長輪詢Ajax,在線聊天時,能夠用到
Setbit 的實際應(yīng)用
場景: 1億個用戶, 每個用戶 登陸/做任意操作 ,記為 今天活躍,否則記為不活躍
每周評出: 有獎活躍用戶: 連續(xù)7天活動
每月評,等等...
思路:
Userid dt active
1 2013-07-27 1
1 2013-0726 1
如果是放在表中, 1:表急劇增大,2:要用group ,sum運算,計算較慢
用: 位圖法 bit-map
Log0721: ‘011001...............0’
......
log0726 : ‘011001...............0’
Log0727 : ‘0110000.............1’
1: 記錄用戶登陸:
每天按日期生成一個位圖, 用戶登陸后,把user_id位上的bit值置為1
2: 把1周的位圖 and 計算,
位上為1的,即是連續(xù)登陸的用戶
redis 127.0.0.1:6379> setbit mon 100000000 0
(integer) 0
redis 127.0.0.1:6379> setbit mon 3 1
(integer) 0
redis 127.0.0.1:6379> setbit mon 5 1
(integer) 0
redis 127.0.0.1:6379> setbit mon 7 1
(integer) 0
redis 127.0.0.1:6379> setbit thur 100000000 0
(integer) 0
redis 127.0.0.1:6379> setbit thur 3 1
(integer) 0
redis 127.0.0.1:6379> setbit thur 5 1
(integer) 0
redis 127.0.0.1:6379> setbit thur 8 1
(integer) 0
redis 127.0.0.1:6379> setbit wen 100000000 0
(integer) 0
redis 127.0.0.1:6379> setbit wen 3 1
(integer) 0
redis 127.0.0.1:6379> setbit wen 4 1
(integer) 0
redis 127.0.0.1:6379> setbit wen 6 1
(integer) 0
redis 127.0.0.1:6379> bitop and res mon feb wen
(integer) 12500001
如上例,優(yōu)點:
1: 節(jié)約空間, 1億人每天的登陸情況,用1億bit,約1200WByte,約10M 的字符就能表示
2: 計算方便
集合 set 相關(guān)命令
集合的性質(zhì): 唯一性,無序性,確定性
注: 在string和link的命令中,可以通過range 來訪問string中的某幾個字符或某幾個元素
但,因為集合的無序性,無法通過下標(biāo)或范圍來訪問部分元素.
因此想看元素,要么隨機(jī)先一個,要么全選
sadd key value1 value2
作用: 往集合key中增加元素
srem value1 value2
作用: 刪除集合中集為 value1 value2的元素
返回值: 忽略不存在的元素后,真正刪除掉的元素的個數(shù)
spop key
作用: 返回并刪除集合中key中1個隨機(jī)元素
隨機(jī)--體現(xiàn)了無序性
srandmember key
作用: 返回集合key中,隨機(jī)的1個元素.
sismember key value
作用: 判斷value是否在key集合中
是返回1,否返回0
smembers key
作用: 返回集中中所有的元素
scard key
作用: 返回集合中元素的個數(shù)
smove source dest value
作用:把source中的value刪除,并添加到dest集合中
sinter key1 key2 key3
作用: 求出key1 key2 key3 三個集合中的交集,并返回
redis 127.0.0.1:6379> sadd s1 0 2 4 6
(integer) 4
redis 127.0.0.1:6379> sadd s2 1 2 3 4
(integer) 4
redis 127.0.0.1:6379> sadd s3 4 8 9 12
(integer) 4
redis 127.0.0.1:6379> sinter s1 s2 s3
- "4"
redis 127.0.0.1:6379> sinter s3 s1 s2
- "4"
sinterstore dest key1 key2 key3
作用: 求出key1 key2 key3 三個集合中的交集,并賦給dest
suion key1 key2.. Keyn
作用: 求出key1 key2 keyn的并集,并返回
sdiff key1 key2 key3
作用: 求出key1與key2 key3的差集
即key1-key2-key3
order set 有序集合
zadd key score1 value1 score2 value2 ..
添加元素
redis 127.0.0.1:6379> zadd stu 18 lily 19 hmm 20 lilei 21 lilei
(integer) 3
zrem key value1 value2 ..
作用: 刪除集合中的元素
zremrangebyscore key min max
作用: 按照socre來刪除元素,刪除score在[min,max]之間的
redis 127.0.0.1:6379> zremrangebyscore stu 4 10
(integer) 2
redis 127.0.0.1:6379> zrange stu 0 -1
- "f"
zremrangebyrank key start end
作用: 按排名刪除元素,刪除名次在[start,end]之間的
redis 127.0.0.1:6379> zremrangebyrank stu 0 1
(integer) 2
redis 127.0.0.1:6379> zrange stu 0 -1
"c"
"e"
"f"
"g"
zrank key member
查詢member的排名(升續(xù) 0名開始)
zrevrank key memeber
查詢 member的排名(降續(xù) 0名開始)
ZRANGE key start stop [WITHSCORES]
把集合排序后,返回名次[start,stop]的元素
默認(rèn)是升續(xù)排列
Withscores 是把score也打印出來
zrevrange key start stop
作用:把集合降序排列,取名字[start,stop]之間的元素
zrangebyscore key min max [withscores] limit offset N
作用: 集合(升續(xù))排序后,取score在[min,max]內(nèi)的元素,
并跳過 offset個, 取出N個
redis 127.0.0.1:6379> zadd stu 1 a 3 b 4 c 9 e 12 f 15 g
(integer) 6
redis 127.0.0.1:6379> zrangebyscore stu 3 12 limit 1 2 withscores
"c"
"4"
"e"
"9"
zcard key
返回元素個數(shù)
zcount key min max
返回[min,max] 區(qū)間內(nèi)元素的數(shù)量
zinterstore destination numkeys key1 [key2 ...]
[WEIGHTS weight [weight ...]]
[AGGREGATE SUM|MIN|MAX]
求key1,key2的交集,key1,key2的權(quán)重分別是 weight1,weight2
聚合方法用: sum |min|max
聚合的結(jié)果,保存在dest集合內(nèi)
注意: weights ,aggregate如何理解?
答: 如果有交集, 交集元素又有socre,score怎么處理?
Aggregate sum->score相加 , min 求最小score, max 最大score
另: 可以通過weigth設(shè)置不同key的權(quán)重, 交集時,socre * weights
詳見下例
redis 127.0.0.1:6379> zadd z1 2 a 3 b 4 c
(integer) 3
redis 127.0.0.1:6379> zadd z2 2.5 a 1 b 8 d
(integer) 3
redis 127.0.0.1:6379> zinterstore tmp 2 z1 z2
(integer) 2
redis 127.0.0.1:6379> zrange tmp 0 -1
"b"
"a"
redis 127.0.0.1:6379> zrange tmp 0 -1 withscores
"b"
"4"
"a"
"4.5"
redis 127.0.0.1:6379> zinterstore tmp 2 z1 z2 aggregate sum
(integer) 2
redis 127.0.0.1:6379> zrange tmp 0 -1 withscores
"b"
"4"
"a"
"4.5"
redis 127.0.0.1:6379> zinterstore tmp 2 z1 z2 aggregate min
(integer) 2
redis 127.0.0.1:6379> zrange tmp 0 -1 withscores
"b"
"1"
"a"
"2"
redis 127.0.0.1:6379> zinterstore tmp 2 z1 z2 weights 1 2
(integer) 2
redis 127.0.0.1:6379> zrange tmp 0 -1 withscores
"b"
"5"
"a"
"7"
Hash 哈希數(shù)據(jù)類型相關(guān)命令
hset key field value
作用: 把key中 filed域的值設(shè)為value
注:如果沒有field域,直接添加,如果有,則覆蓋原field域的值
hmset key field1 value1 [field2 value2 field3 value3 ......fieldn valuen]
作用: 設(shè)置field1->N 個域, 對應(yīng)的值是value1->N
(對應(yīng)PHP理解為 $key = array(file1=>value1, field2=>value2 ....fieldN=>valueN))
hget key field
作用: 返回key中field域的值
hmget key field1 field2 fieldN
作用: 返回key中field1 field2 fieldN域的值
hgetall key
作用:返回key中,所有域與其值
hdel key field
作用: 刪除key中 field域
hlen key
作用: 返回key中元素的數(shù)量
hexists key field
作用: 判斷key中有沒有field域
hinrby key field value
作用: 是把key中的field域的值增長整型值value
hinrby float key field value
作用: 是把key中的field域的值增長浮點值value
hkeys key
作用: 返回key中所有的field
kvals key
作用: 返回key中所有的value
Redis 中的事務(wù)
Redis支持簡單的事務(wù)
Redis與 mysql事務(wù)的對比
| |
Mysql
|
Redis
|
|
開啟
|
start transaction
|
muitl
|
|
語句
|
普通sql
|
普通命令
|
|
失敗
|
rollback 回滾
|
discard 取消
|
|
成功
|
commit
|
exec
|
注: rollback與discard 的區(qū)別
如果已經(jīng)成功執(zhí)行了2條語句, 第3條語句出錯.
Rollback后,前2條的語句影響消失.
Discard只是結(jié)束本次事務(wù),前2條語句造成的影響仍然還在
注:
在mutil后面的語句中, 語句出錯可能有2種情況
1: 語法就有問題,
這種,exec時,報錯, 所有語句得不到執(zhí)行
2: 語法本身沒錯,但適用對象有問題. 比如 zadd 操作list對象
Exec之后,會執(zhí)行正確的語句,并跳過有不適當(dāng)?shù)恼Z句.
(如果zadd操作list這種事怎么避免? 這一點,由程序員負(fù)責(zé))
思考:
我正在買票
Ticket -1 , money -100
而票只有1張, 如果在我multi之后,和exec之前, 票被別人買了---即ticket變成0了.
我該如何觀察這種情景,并不再提交
悲觀的想法:
世界充滿危險,肯定有人和我搶, 給 ticket上鎖, 只有我能操作. [悲觀鎖]
樂觀的想法:
沒有那么人和我搶,因此,我只需要注意,
--有沒有人更改ticket的值就可以了 [樂觀鎖]
Redis的事務(wù)中,啟用的是樂觀鎖,只負(fù)責(zé)監(jiān)測key沒有被改動.
具體的命令---- watch命令
例:
redis 127.0.0.1:6379> watch ticket
OK
redis 127.0.0.1:6379> multi
OK
redis 127.0.0.1:6379> decr ticket
QUEUED
redis 127.0.0.1:6379> decrby money 100
QUEUED
redis 127.0.0.1:6379> exec
(nil) // 返回nil,說明監(jiān)視的ticket已經(jīng)改變了,事務(wù)就取消了.
redis 127.0.0.1:6379> get ticket
"0"
redis 127.0.0.1:6379> get money
"200"
watch key1 key2 ... keyN
作用:監(jiān)聽key1 key2..keyN有沒有變化,如果有變, 則事務(wù)取消
unwatch
作用: 取消所有watch監(jiān)聽
消息訂閱
使用辦法:
訂閱端: Subscribe 頻道名稱
發(fā)布端: publish 頻道名稱 發(fā)布內(nèi)容
客戶端例子:
redis 127.0.0.1:6379> subscribe news
Reading messages... (press Ctrl-C to quit)
"subscribe"
"news"
(integer) 1
"message"
"news"
"good good study"
"message"
"news"
"day day up"
服務(wù)端例子:
redis 127.0.0.1:6379> publish news 'good good study'
(integer) 1
redis 127.0.0.1:6379> publish news 'day day up'
(integer) 1
Redis持久化配置
Redis的持久化有2種方式 1快照 2是日志
Rdb快照的配置選項
save 900 1 // 900內(nèi),有1條寫入,則產(chǎn)生快照
save 300 1000 // 如果300秒內(nèi)有1000次寫入,則產(chǎn)生快照
save 60 10000 // 如果60秒內(nèi)有10000次寫入,則產(chǎn)生快照
(這3個選項都屏蔽,則rdb禁用)
stop-writes-on-bgsave-error yes // 后臺備份進(jìn)程出錯時,主進(jìn)程停不停止寫入?
rdbcompression yes // 導(dǎo)出的rdb文件是否壓縮
Rdbchecksum yes // 導(dǎo)入rbd恢復(fù)時數(shù)據(jù)時,要不要檢驗rdb的完整性
dbfilename dump.rdb //導(dǎo)出來的rdb文件名
dir ./ //rdb的放置路徑
Aof 的配置
appendonly no # 是否打開 aof日志功能
appendfsync always # 每1個命令,都立即同步到aof. 安全,速度慢
appendfsync everysec # 折衷方案,每秒寫1次
appendfsync no # 寫入工作交給操作系統(tǒng),由操作系統(tǒng)判斷緩沖區(qū)大小,統(tǒng)一寫入到aof. 同步頻率低,速度快,
no-appendfsync-on-rewrite yes: # 正在導(dǎo)出rdb快照的過程中,要不要停止同步aof
auto-aof-rewrite-percentage 100 #aof文件大小比起上次重寫時的大小,增長率100%時,重寫
auto-aof-rewrite-min-size 64mb #aof文件,至少超過64M時,重寫
注: 在dump rdb過程中,aof如果停止同步,會不會丟失?
答: 不會,所有的操作緩存在內(nèi)存的隊列里, dump完成后,統(tǒng)一操作.
注: aof重寫是指什么?
答: aof重寫是指把內(nèi)存中的數(shù)據(jù),逆化成命令,寫入到.aof日志里.
以解決 aof日志過大的問題.
問: 如果rdb文件,和aof文件都存在,優(yōu)先用誰來恢復(fù)數(shù)據(jù)?
答: aof
問: 2種是否可以同時用?
答: 可以,而且推薦這么做
問: 恢復(fù)時rdb和aof哪個恢復(fù)的快
答: rdb快,因為其是數(shù)據(jù)的內(nèi)存映射,直接載入到內(nèi)存,而aof是命令,需要逐條執(zhí)行 redis 服務(wù)器端命令
redis 127.0.0.1:6380> time ,顯示服務(wù)器時間 , 時間戳(秒), 微秒數(shù)
"1375270361"
"504511"
redis 127.0.0.1:6380> dbsize // 當(dāng)前數(shù)據(jù)庫的key的數(shù)量
(integer) 2
redis 127.0.0.1:6380> select 2
OK
redis 127.0.0.1:6380[2]> dbsize
(integer) 0
redis 127.0.0.1:6380[2]>
BGREWRITEAOF 后臺進(jìn)程重寫AOF
BGSAVE 后臺保存rdb快照
SAVE 保存rdb快照
LASTSAVE 上次保存時間
Slaveof master-Host port , 把當(dāng)前實例設(shè)為master的slave
Flushall 清空所有庫所有鍵
Flushdb 清空當(dāng)前庫所有鍵
Showdown [save/nosave]
注: 如果不小心運行了flushall, 立即 shutdown nosave ,關(guān)閉服務(wù)器
然后 手工編輯aof文件, 去掉文件中的 “flushall ”相關(guān)行, 然后開啟服務(wù)器,就可以導(dǎo)入回原來數(shù)據(jù).
如果,flushall之后,系統(tǒng)恰好bgrewriteaof了,那么aof就清空了,數(shù)據(jù)丟失.
Slowlog 顯示慢查詢
注:多慢才叫慢?
答: 由slowlog-log-slower-than 10000 ,來指定,(單位是微秒)
服務(wù)器儲存多少條慢查詢的記錄?
答: 由 slowlog-max-len 128 ,來做限制
Info [Replication/CPU/Memory..]
查看redis服務(wù)器的信息
Config get 配置項
Config set 配置項 值 (特殊的選項,不允許用此命令設(shè)置,如slave-of, 需要用單獨的slaveof命令來設(shè)置)
Redis運維時需要注意的參數(shù)
1: 內(nèi)存
Memory
used_memory:859192 數(shù)據(jù)結(jié)構(gòu)的空間
used_memory_rss:7634944 實占空間
mem_fragmentation_ratio:8.89 前2者的比例,1.N為佳,如果此值過大,說明redis的內(nèi)存的碎片化嚴(yán)重,可以導(dǎo)出再導(dǎo)入一次.
2: 主從復(fù)制
Replication
role:slave
master_host:192.168.1.128
master_port:6379
master_link_status:up
3:持久化
Persistence
rdb_changes_since_last_save:0
rdb_last_save_time:1375224063
4: fork耗時
Status
latest_fork_usec:936 上次導(dǎo)出rdb快照,持久化花費微秒
注意: 如果某實例有10G內(nèi)容,導(dǎo)出需要2分鐘,
每分鐘寫入10000次,導(dǎo)致不斷的rdb導(dǎo)出,磁盤始處于高IO狀態(tài).
5: 慢日志
config get/set slowlog-log-slower-than
CONFIG get/SET slowlog-max-len
slowlog get N 獲取慢日志
運行時更改master-slave
修改一臺slave(設(shè)為A)為new master
- 命令該服務(wù)不做其他redis服務(wù)的slave
命令: slaveof no one
- 修改其readonly為yes
其他的slave再指向new master A
- 命令該服務(wù)為new master A的slave
命令格式 slaveof IP port 監(jiān)控工具 sentinel
[圖片上傳失敗...(image-feb9e0-1558439998605)]
Sentinel不斷與master通信,獲取master的slave信息.
監(jiān)聽master與slave的狀態(tài)
如果某slave失效,直接通知master去除該slave.
如果master失效,,是按照slave優(yōu)先級(可配置), 選取1個slave做 new master
,把其他slave--> new master
疑問: sentinel與master通信,如果某次因為master IO操作頻繁,導(dǎo)致超時,
此時,認(rèn)為master失效,很武斷.
解決: sentnel允許多個實例看守1個master, 當(dāng)N臺(N可設(shè)置)sentinel都認(rèn)為master失效,才正式失效.
Sentinel選項配置
port 26379 # 端口
sentinel monitor mymaster 127.0.0.1 6379 2 ,
給主機(jī)起的名字(不重即可),
當(dāng)2個sentinel實例都認(rèn)為master失效時,正式失效
sentinel down-after-milliseconds mymaster 30000 多少毫秒后連接不到master認(rèn)為斷開
sentinel can-failover mymaster yes #****是否允許sentinel****修改slave->master. 如為no,****則只能監(jiān)控,****無權(quán)修改./
sentinel parallel-syncs mymaster 1 , 一次性修改幾個slave指向新的new master.
sentinel client-reconfig-script mymaster /var/redis/reconfig.sh ,# 在重新配置new master,new slave過程,可以觸發(fā)的腳本 redis 與關(guān)系型數(shù)據(jù)庫的適合場景
書簽系統(tǒng)
create table book (
bookid int,
title char(20)
)engine myisam charset utf8;
insert into book values
(5 , 'PHP圣經(jīng)'),
(6 , 'ruby實戰(zhàn)'),
(7 , 'mysql運維')
(8, 'ruby服務(wù)端編程');
create table tags (
tid int,
bookid int,
content char(20)
)engine myisam charset utf8;
insert into tags values
(10 , 5 , 'PHP'),
(11 , 5 , 'WEB'),
(12 , 6 , 'WEB'),
(13 , 6 , 'ruby'),
(14 , 7 , 'database'),
(15 , 8 , 'ruby'),
(16 , 8 , 'server');
既有web標(biāo)簽,又有PHP,同時還標(biāo)簽的書,要用連接查詢
select * from tags inner join tags as t on tags.bookid=t.bookid
where tags.content='PHP' and t.content='WEB';
換成key-value存儲
用kv 來存儲
set book:5:title 'PHP圣經(jīng)'
set book:6:title 'ruby實戰(zhàn)'
set book:7:title 'mysql運難'
set book:8:title ‘ruby server’
sadd tag:PHP 5
sadd tag:WEB 5 6
sadd tag:database 7
sadd tag:ruby 6 8
sadd tag:SERVER 8
查: 既有PHP,又有WEB的書
Sinter tag:PHP tag:WEB #查集合的交集
查: 有PHP或有WEB標(biāo)簽的書
Sunin tag:PHP tag:WEB
查:含有ruby,不含WEB標(biāo)簽的書
Sdiff tag:ruby tag:WEB #求差集
Redis key 設(shè)計技巧
1: 把表名轉(zhuǎn)換為key前綴 如, tag:
2: 第2段放置用于區(qū)分區(qū)key的字段--對應(yīng)mysql中的主鍵的列名,如userid
3: 第3段放置主鍵值,如2,3,4...., a , b ,c
4: 第4段,寫要存儲的列名
|
用戶表 user , 轉(zhuǎn)換為key-value存儲
|
|
userid
|
username
|
passworde
|
|
|
9
|
Lisi
|
1111111
|
|
set user:userid:9:username lisi
set user:userid:9:password 111111
set user:userid:9:email lisi@163.com
keys user:userid:9*
2 注意:
在關(guān)系型數(shù)據(jù)中,除主鍵外,還有可能其他列也步驟查詢,
如上表中, username 也是極頻繁查詢的,往往這種列也是加了索引的.
轉(zhuǎn)換到k-v數(shù)據(jù)中,則也要相應(yīng)的生成一條按照該列為主的key-value
Set user:username:lisi:uid 9
這樣,我們可以根據(jù)username:lisi:uid ,查出userid=9,
再查user:9:password/email ...
完成了根據(jù)用戶名來查詢用戶信息 php-redis擴(kuò)展編譯
1: 到pecl.php.net 搜索redis
2: 下載stable版(穩(wěn)定版)擴(kuò)展
3: 解壓,
4: 執(zhí)行/php/path/bin/phpize (作用是檢測PHP的內(nèi)核版本,并為擴(kuò)展生成相應(yīng)的編譯配置)
5: configure --with-php-config=/php/path/bin/php-config
6: make && make install
引入編譯出的redis.so插件
1: 編輯php.ini
2: 添加
redis插件的使用
// get instance
$redis = new Redis();
// connect to redis server
$redis->open('localhost',6380);
$redis->set('user:userid:9:username','wangwu');
var_dump($redis->get('user:userid:9:username'));
微博項目的key設(shè)計
全局相關(guān)的key:
|
表名
|
global
|
|
列名
|
操作
|
備注
|
|
Global:userid
|
incr
|
產(chǎn)生全局的userid
|
|
Global:postid
|
Incr
|
產(chǎn)生全局的postid
|
用戶相關(guān)的key(表)
|
表名
|
user
|
|
Userid
|
Username
|
Password
|
Authsecret
|
|
3
|
Test3
|
1111111
|
U*Q(%_
|
在redis中,變成以下幾個key
|
Key前綴
|
user
|
|
User:Userid:*
|
User:userid:*Username
|
User:userid:*Password
|
User:userid:*:Authsecret
|
|
User:userid:3
|
User:userid:3:Test3
|
User:userid:3:1111111
|
User:userid:3:#U*Q(%_
|
微博相關(guān)的表設(shè)計
|
表名
|
post
| | | |
|
Postid
|
Userid
|
Username
|
Time
|
Content
|
|
4
|
2
|
Lisi
|
1370987654f
|
測試內(nèi)容
|
微博在redis中,與表設(shè)計對應(yīng)的key設(shè)計
|
Key前綴
|
post
| | | |
|
Post:Postid:*
|
Post:postid:*Userid
|
Post:postid:*:Username
|
Post:postid:*:Time
|
Post:postid:*:Content
|
|
4
|
2
|
Lisi
|
1370987654f
|
測試內(nèi)容
|
[圖片上傳失敗...(image-e51540-1558439998604)] 關(guān)注表: following
Following:$userid -->
[圖片上傳失敗...(image-495d01-1558439998604)] 粉絲表
Follower:$userid --->
推送表:revicepost
| |
| | [圖片上傳失敗...(image-a43a3-1558439998598)]
|
|
3
|
4
|
7
| | | |
[圖片上傳失敗...(image-c368e1-1558439998604)]
=================拉模型,改進(jìn)=====================
拉取表
[圖片上傳失敗...(image-6c890e-1558439998604)]
|
3
|
4
|
7
| | | |
[圖片上傳失敗...(image-7b4883-1558439998604)]
問: 上次我拉取了 A->5,67,三條微博, 下次刷新home.php, 從>7的微博開始拉取
解決: 拉取時,設(shè)定一個lastpull時間點, 下次拉取時,取>lastpull的微博
問: 有很多關(guān)注人,如何取?
解決: 循環(huán)自己的關(guān)注列表,逐個取他們的新微博
問: 取出來之后放在哪兒?
答: pull:$userid的鏈接里
問: 如果個人中心,只有前1000條
答: ltrim,只取前1000條
問: 如果我關(guān)注 A,B兩人, 從2人中,各取3條最新信息
,這3+3條信息, 從時間上,是交錯的, 如何按時間排序?
答: 我們發(fā)布時, 是發(fā)布的hash結(jié)構(gòu), 不能按時間來排序.
解決: 同步時,取微博后,記錄本次取的微博的最大id,
下次同步時,只取比最大id更大的微博
Time taken for tests: 32.690 seconds
Complete requests: 20000
Failed requests: 0
Write errors: 0
Non-2xx responses: 20000
Total transferred: 13520000 bytes
Total POSTed: 5340000
HTML transferred: 9300000 bytes
Requests per second: 611.80 [#/sec] (mean)
Time per request: 81.726 [ms] (mean)
Time per request: 1.635 [ms] (mean, across all concurrent requests)
Transfer rate: 403.88 [Kbytes/sec] received
159.52 kb/s sent
563.41 kb/s total
Connection Times (ms)
min mean[+/-sd] median max
Connect: 0 0 0.9 0 19
Processing: 14 82 8.4 81 153
Waiting: 4 82 8.4 80 153
Total: 20 82 8.2 81 153
Percentage of the requests served within a certain time (ms)
50% 81
66% 84
75% 86
80% 88
90% 93
95% 96
98% 100
99% 103
100% 153 (longest request)
測試結(jié)果:
50個并發(fā), 20000次請求, 虛擬下,未做特殊優(yōu)化
每次請求redis寫操作6次.
30+秒左右完成.
平均每秒發(fā)布700條微博, 4000次redis寫入.
后臺定時任務(wù),回歸冷數(shù)據(jù)入mysql Redis配置文件
daemonize yes # redis是否以后臺進(jìn)程運行
Requirepass 密碼 # 配置redis連接的密碼
注:配置密碼后,客戶端連上服務(wù)器,需要先執(zhí)行授權(quán)命令