-
解決mysql的問題:
-
查詢的速度
把數據存儲到內存中 - 不需要提前定義好字段
{}
-
NoSQL分類:
1. memcache
問題:
- 數據存放到內存, 不能落地,持久化
- 支持數據類型太少,只支持字符串
2. MongoDB
- 數據存放到內存, 解決了數據的持久化
- 支持多種數據類型
3. redis
- 數據存放到內存, 解決了數據的持久化
- 支持5大數據類型格式
用的多:微博
常見操作
1. 對於key的所有操作
-
del key1 key2 … keyn
作用:刪除1個或者多個鍵
返回值:不存在的key忽略掉,返回真正刪除的key的數量 -
rename key newkey
作用:給key附一個新的key名
注:如果說newkey的值已經存在,則newkey的原值被覆蓋 -
renamenx key newkey
作用:把key改名爲newkey
返回:發生修改返回1,未發生修改返回0 -
move key db
redis 127.0.0.1:6379[1]> select 2
OK
redis 127.0.0.1:6379[2]> keys (empty list or set)redis 127.0.0.1:6379[2]> select 0OKredis 127.0.0.1:6379> keys
1) “name”
2) “cc”
3) “a”
4) “b”
redis 127.0.0.1:6379> move cc 2
(integer) 1
redis 127.0.0.1:6379> select 2
OK
redis 127.0.0.1:6379[2]> keys *
1) “cc”
redis 127.0.0.1:6379[2]> get cc
“3”
(注意: 一個redis進程,可以打開不止一個數據庫, 默認打開16個數據庫,從0到15編號,如果想打開更多數據庫,可以從配置文件修改) -
keys pattern
pattern可選擇如下:
: 通配任意多個字符?: 通配單個字符[]: 通配括號內的某1個字符redis 127.0.0.1:6379> flushdbOKredis 127.0.0.1:6379> keys
(empty list or set)
redis 127.0.0.1:6379> mset one 1 two 2 three 3 four 4
OK
redis 127.0.0.1:6379> keys o1) “one”redis 127.0.0.1:6379> key o
(error) ERR unknown command ‘key’
redis 127.0.0.1:6379> keys *o
1) “two”
redis 127.0.0.1:6379> keys ???
1) “one”
2) “two”
redis 127.0.0.1:6379> keys on?
1) “one”
redis 127.0.0.1:6379> set ons yes
OK
redis 127.0.0.1:6379> keys on[eaw]
1)”one” -
randomkey 返回隨機key
-
exists key 判斷key是否存在 返回1/0
-
type key 返回key存儲的值的類型 有string link set order set hash
-
ttl key 查詢key的生命週期
-
expire key 整型值 設置key的生命週期
-
pexpire key 毫秒數, 設置生命週期
-
pttl key, 以毫秒返回生命週期
- persist key 把指定key設置爲永久有效
注:對於不存在的key或已過期的key/不過期的key,都返回-1
Redis2.8中,對於不存在的key,返回-2
2. 字符串操作
-
set key value [ex 秒數] / [px 毫秒數]
set a 1 ex 10 , 10秒有效 Set a 1 px 9000 , 9秒有效 注: 如果ex,px同時寫,以後面的有效期爲準 如 set a 1 ex 100 px 9000, 實際有效期是9000毫秒
-
mset multi set
一次性設置多個鍵值 mset key1 v1 key2 v2 ....
-
get key
獲取key的值
-
mget key1 key2 ..keyn
獲取多個key的值
-
getset key newvalue
獲取並返回舊值,設置新值 redis 127.0.0.1:6379> set cnt 0 OK redis 127.0.0.1:6379> getset cnt 1 "0" redis 127.0.0.1:6379> getset cnt 2 "1"
-
incr key
作用: 指定的key的值加1,並返回加1後的值
-
incrby key number
redis 127.0.0.1:6379> incrby age 90 (integer) 92
-
incrbyfloat key floatnumber
redis 127.0.0.1:6379> incrbyfloat age 3.5 "95.5"
-
decr key
redis 127.0.0.1:6379> set age 20 OK redis 127.0.0.1:6379> decr age (integer) 19
-
decrby key number
redis 127.0.0.1:6379> decrby age 3 (integer) 16
應用場景
在登錄的時候,可以控制頻控
3. 鏈表操作
-
lpush key value
作用: 把值插入到鏈表頭部
-
rpop key
作用: 返回並刪除鏈表尾元素
-
rpush,lpop: 不解釋
-
lrange key start stop
作用: 返回鏈表中[start ,stop]中的元素 規律: 左數從0開始,右數從-1開始
-
ltrim key start stop
作用: 剪切key對應的鏈接,切[start,stop]一段,並把該段重新賦給key
-
lindex key index
作用: 返回index索引上的值, 如 lindex key 2
-
llen key
作用:計算鏈接表的元素個數 redis 127.0.0.1:6379> llen task (integer) 3 redis 127.0.0.1:6379>
-
linsert key after|before search value
作用: 在key鏈表中尋找’search’,並在search值之前|之後,.插入value 注: 一旦找到一個search後,命令就結束了,因此不會插入多個value
場景: 長輪詢Ajax,在線聊天時,能夠用到
4. 集合set操作
-
sadd setname value1 value2
作用: 往集合setname中增加元素
-
srem value1 value2
作用: 刪除集合中集爲 value1 value2的元素 返回值: 忽略不存在的元素後,真正刪除掉的元素的個數
-
spop key
作用: 返回並刪除集合中key中1個隨機元素
-
srandmember key
作用: 返回集合key中,隨機的1個元素.
-
sismember key value
作用: 判斷value是否在key集合中 是返回1,否返回0
-
smembers key
作用: 返回集中中所有的元素
-
scard key
作用: 返回集合中元素的個數
-
smove source dest value
作用:把source中的value刪除,並添加到dest集合中
-
sinter s1 s2 s3
作用: 求出s1 s2 s3 三個集合中的交集,並返回 redis 127.0.0.1:6379> sadd s1 0 2 4 6 (integer) 4 redis 127.0.0.1:6379> sadd s2 1 2 3 4 (integer) 4 redis 127.0.0.1:6379> sadd s3 4 8 9 12 (integer) 4 redis 127.0.0.1:6379> sinter s1 s2 s3 1) "4" redis 127.0.0.1:6379> sinter s3 s1 s2 1)"4"
-
sinterstore dest s1 s2 s3
作用: 求出s1 s2 s3 三個集合中的交集,並賦給dest
-
suion s1 s2 s3.. sn
作用: 求出s1 s2 s3.. sn的並集,並返回
-
sdiff s1 s2 s3
作用: 求出s1與s2 s3的差集 即s1-s2-s3
5. 有序集合order set操作
-
zadd s1 score1 value1 score2 value2 ..
redis 127.0.0.1:6379> zadd stu 18 lily 19 hmm 20 lilei 21 lilei (integer) 3
-
zrem s1 value1 value2 ..
作用: 刪除集合中的元素
-
zremrangebyscore sname min max
作用: 按照socre來刪除元素,刪除score在[min,max]之間的 redis 127.0.0.1:6379> zremrangebyscore stu 4 10 (integer) 2 redis 127.0.0.1:6379> zrange stu 0 -1 1) "f"
-
zremrangebyrank sname start end
作用: 按排名刪除元素,刪除名次在[start,end]之間的 redis 127.0.0.1:6379> zremrangebyrank stu 0 1 (integer) 2 redis 127.0.0.1:6379> zrange stu 0 -1 1) "c" 2) "e" 3) "f" 4) "g"
-
zrank key member
查詢member的排名(升序 0名開始)
-
zrevrank key memeber
查詢 member的排名(降序 0名開始)
-
ZRANGE key start stop [WITHSCORES]
把集合排序後,返回名次[start,stop]的元素 默認是升續排列 Withscores 是把score也打印出來
-
zrevrange key start stop
作用:把集合降序排列,取名字[start,stop]之間的元素
-
zrangebyscore key min max [withscores] limit offset N
作用: 集合(升續)排序後,取score在[min,max]內的元素, 並跳過 offset個, 取出N個 redis 127.0.0.1:6379> zadd stu 1 a 3 b 4 c 9 e 12 f 15 g (integer) 6 redis 127.0.0.1:6379> zrangebyscore stu 3 12 limit 1 2 withscores 1) "c" 2) "4" 3) "e" 4) "9"
-
zcard key
返回元素個數
-
zcount key min max
返回[min,max] 區間內元素的數量
6. Hash數據結構操作
-
hset key field value
作用: 把hash表中 filed域的值設爲value 注:如果沒有field域,直接添加,如果有,則覆蓋原field域的值
-
hmset key field1 value1 [field2 value2 field3 value3 ……fieldn valuen]
作用: 設置field1->N 個域, 對應的值是value1->N (對應PHP理解爲 $key = array(file1=>value1, field2=>value2 ....fieldN=>valueN))
-
hget key field
作用: 返回key中field域的值
-
hmget key field1 field2 fieldN
作用: 返回key中field1 field2 fieldN域的值
-
hgetall key
作用:返回key中,所有域與其值
-
hdel key field
作用: 刪除key中 field域
-
hlen key
作用: 返回key中元素的數量
-
hexists key field
作用: 判斷key中有沒有field域
-
hincrby key field value
作用: 是把key中的field域的值增長整型值value
-
hincrby float key field value
作用: 是把key中的field域的值增長浮點值value
-
hkeys key
作用: 返回key中所有的field
-
hvals key
作用: 返回key中所有的value
安裝REDIS模塊
1. pip安裝
pip3 install redis
2. 源碼安裝
wget https://pypi.python.org/packages/source/r/redis/redis-2.9.1.tar.gz
tar xvzf redis-2.9.1.tar.gz
cd redis-2.9.1
python setup.py install
PYTHON操作REDIS
redis連接實例是線程安全的,可以直接將redis連接實例設置爲一個全局變量,直接使用
>>> import redis
>>> r = redis.Redis(host='localhost',port=6379,password='', db=0)
>>> r.set('guo','shuai')
True
>>> r.get('guo')
'shuai'
>>> r['guo']
'shuai'
>>> r.keys()
['guo']
>>> r.dbsize() #當前數據庫包含多少條數據
1L
>>> r.delete('guo')
1
>>> r.save() #執行“檢查點”操作,將數據寫回磁盤。保存時阻塞
True
>>> r.get('guo');
>>> r.flushdb() #清空r中的所有數據
True
我們發現,其實python操作redis中使用的方法非常的簡單,和我們之前在命令行學習redis的時候,使用的方法是一樣的
PIPELINE操作
管道(pipeline)是redis在提供單個請求中緩衝多條服務器命令的基類的子類。它通過減少服務器-客戶端之間反覆的TCP數據庫包,從而大大提高了執行批量命令的功能
>>> p = r.pipeline() --創建一個管道
>>> p.set('hello','redis')
>>> p.sadd('faz','baz')
>>> p.incr('num')
>>> p.execute()
[True, 1, 1]
>>> r.get('hello')
'redis'
管道的命令可以寫在一起,如:
>>> p.set('hello','redis').sadd('faz','baz').incr('num').execute()
常見的一些應用場景
1. 統計頁面點擊數
論壇的每個帖子都要記錄點擊次數,而點擊次數比回帖的次數的多得多。如果使用關係數據庫來存儲點擊,可能存在大量的行級鎖爭用。所以,點擊數的增加使用redis的INCR命令最好不過了
當redis服務器啓動時,可以從關係數據庫讀入點擊數,假設1237這個頁面被訪問了34634次,因此我們使用如下的方法初始化:
>>> r.set("visit:1237:totals",34634)
True
每當有一個頁面點擊,則使用INCR增加點擊數即可
>>> r.incr("visit:1237:totals")
34635
>>> r.incr("visit:1237:totals")
34636
頁面載入的時候則可直接獲取這個值
>>> r.get ("visit:1237:totals")
'34636'
類似的場景:當頁面登錄發送驗證碼的時候,爲了控制用戶發送的次數,也可以採用這種方法進行頻率控制
2. 如何保存一個對象數據
由於非關係數據庫沒有固定的列,因此如何去存儲一個數據對象,我們可以使用hash類型保存多樣化的對象
比如說,我們想要保存用戶的年齡,email,手機號等內容
>>> r.hset('users:jdoe', 'name', "John Doe")
1L
>>> r.hset('users:jdoe', 'email', '[email protected]')
1L
>>> r.hset('users:jdoe', 'phone', '1555313940')
1L
>>> r.hincrby('users:jdoe', 'visits', 1)
1L
>>> r.hgetall('users:jdoe')
{'phone': '1555313940', 'name': 'John Doe', 'visits': '1', 'email': '[email protected]'}
>>> r.hkeys('users:jdoe')
['name', 'email', 'phone', 'visits']
3. 社交圈子數據
在社交網站中,每一個圈子(circle)都有自己的用戶羣。通過圈子可以找到有共同特徵(比如某一體育活動、遊戲、電影等愛好者)的人。當一個用戶加入一個或幾個圈子後,系統可以向這個用戶推薦圈子中的人
我們定義這樣兩個圈子,並加入一些圈子成員
>>> r.sadd('circle:game:lol','user:debugo')
1
>>> r.sadd('circle:game:lol','user:leo')
1
>>> r.sadd('circle:game:lol','user:Guo')
1
>>> r.sadd('circle:soccer:InterMilan','user:Guo')
1
>>> r.sadd('circle:soccer:InterMilan','user:Levis')
1
>>> r.sadd('circle:soccer:InterMilan','user:leo')
1
獲得某一圈子的成員
>>> r.smembers('circle:game:lol')
set(['user:Guo', 'user:debugo', 'user:leo'])
使用集合運算來得到幾個圈子的共同成員
>>> r.sinter('circle:game:lol', 'circle:soccer:InterMilan')
set(['user:Guo', 'user:leo'])
>>> r.sunion('circle:game:lol', 'circle:soccer:InterMilan')
set(['user:Levis', 'user:Guo', 'user:debugo', 'user:leo'])
4. 反垃圾系統
獲取某段時間所有數據排重值,這個使用Redis的set數據結構最合適了,只需要不斷地將數據往set中扔就行了,set意爲集合,所以會自動排重
5. Pub/Sub構建實時消息系統
Redis的Pub/Sub系統可以構建實時的消息系統,比如很多用Pub/Sub構建的實時聊天系統的例子。
使用辦法:
訂閱端: Subscribe 頻道名稱
發佈端: publish 頻道名稱 發佈內容
客戶端例子:
redis 127.0.0.1:6379> subscribe news
Reading messages... (press Ctrl-C to quit)
1) "subscribe"
2) "news"
3) (integer) 1
1) "message"
2) "news"
3) "good good study"
1) "message"
2) "news"
3) "day day up"
服務端例子:
redis 127.0.0.1:6379> publish news 'good good study'
(integer) 1
redis 127.0.0.1:6379> publish news 'day day up'
(integer) 1
6. Session共享存入redis
我們可以把Session存入redis,來進行共享
存儲配置:
- 安裝包:
pip3 install django-redis-sessions==0.5.6
- 修改setting的配置,增加session配置
SESSION_ENGINE = 'redis_sessions.session'
SESSION_REDIS_HOST = 'localhost'
SESSION_REDIS_PORT = 6379
SESSION_REDIS_DB = 4
SESSION_REDIS_PASSWORD = ''
SESSION_REDIS_PREFIX = 'session'
- url配置:
url(r'^set_session$', views.set_session), # 保存session數據
url(r'^get_session$', views.get_session), # 獲取session數據
- views代碼:
def set_session(request):
""""保存session數據"""
request.session['username'] = 'Django'
request.session['verify_code'] = '123456'
return HttpResponse('保存session數據成功')
def get_session(request):
"""獲取session數據"""
username = request.session.get('username')
verify_code = request.session.get('verify_code')
text = 'username=%s, verify_code=%s' % (username, verify_code)
return HttpResponse(text)
- 通過redis-cli的客戶端查看:
127.0.0.1:6379> select 4
OK
127.0.0.1:6379[4]> keys *
1) "session:0bjyuegx0i5ivyuzpb8ezgo0b35u2z4v"