51Testing软件测试论坛
标题:
Python3之redis使用
[打印本页]
作者:
小小糖
时间:
2018-4-23 14:04
标题:
Python3之redis使用
简介
redis是一个key-value存储系统,和Memcache类似,它支持存储的value类型相对更多,包括string(字符串),
list(链表),set(集合),zset(有序集合),hash(哈希类型)。这些数据类型都支持push/pop,add/remove及取交
集并集和差集及更丰富的操作,而且这些操作都是原子性的。在次基础上,redis支持各种不同方式的排序,与
memcached一样,为了保证效率,数据都是缓冲在内存中。区别是redis会周期性的把更新的数据写入磁盘或把
修改操作写入追加的记录文件,并且在此基础上实现了master-slave(主从)同步。
备注:默认redis有16个数据库,即db0~db15, 一般存取数据如果不指定库的话,默认都是存在db0中。
安装Redis模块
python想操作redis,需要安装第三方模块。
sudo pip3 install redis
or
sudo easy_install redis
or
源码安装
Redis模块基本使用
redis 模块使用可以分类为:
连接方式
连接池
操作
String操作
Hash操作
List操作
Set操作
Sort Set操作
管道
发布订阅
(1)操作模式
redis提供两个类Redis和StrictRedis, StrictRedis用于实现大部分官方的命令,Redis是StrictRedis的子类,用
于向后兼用旧版本。
#!/usr/bin/env python3
#coding:utf8
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
# r = redis.StrictRedis(host='0.0.0.0', port=6379)
# 如果要指定数据库,则 r = redis.StrictRedis(host='0.0.0.0', port=6379, db=0)
r.set('name', 'test')
print(r.get('name'))
# 输出结果
b'test'
str 还是 byte? 通过上面的简单测试,看到redis 取出的结果默认是字节,我们可以设定decode_respo
nses=True 改成字符串。
import redis
r = redis.StrictRedis(host='0.0.0.0', port=6379, decode_responses=True)
r.set('c', 'python')
ret = r.get('c')
print(ret ,type(ret))
# 结果
python <class 'str'>
关于编码
class redis.StrictRedis(host='localhost', port=6379, db=0, password=None, socket_timeout=None, connection
_pool=None, charset='utf-8', errors='strict', decode_responses=False, unix_socket_path=None)
# 默认redis入库编码是utf-8,如果要修改的话,需要指明 charset 和 decode_responsers 为True. 下面是GBK编码。
class redis.StrictRedis (host='localhost', port=6379, db=0, password=None, socket_timeout=None,connectio
n_pool=None, charset='GBK ' , errors='strict', decode_responses=True)
(2)连接池
redis使用connection pool来管理对一个redis server 的所有连接,避免每次建立,释放连接的开销,默认,
每个Redis实例都会维护一个自己的连接池。可以直接建立一个连接池,然后作为参数Redis,这样就可以实现多
个Redis实例共享一个连接池。
import redis
pool = redis.ConnectionPool(host='0.0.0.0', port=6379)
r = redis.Redis(connection_pool=pool)
r.set('age', '16')
print(r.get('age'))
# 结果
b'16'
# 使用 StrictRedis 连接池
import redis
pool = redis.ConnectionPool(host='47.92.114.20', port=6379)
r = redis.StrictRedis(connection_pool=pool)
r.set('age', '16')
print(r.get('age'))
# 结果
b'16'
(3)数据操作
String 操作
redis中的String在在内存中按照一个name对应一个value来存储的。
set(name, value, ex=None, px=None, nx=False, xx=False)
在Redis中设置值,默认,不存在则创建,存在则修改
参数:
ex,过期时间(秒)
px,过期时间(毫秒)
nx,如果设置为True,则只有name不存在时,当前set操作才执行
xx,如果设置为True,则只有name存在时,岗前set操作才执行
import redis
r = redis.StrictRedis(host='0.0.0.0', port=6379)
r.set('age','20')
print(r.get('age'))
# 结果:
b'20'
setnx(name,value)
设置值,只有name不存在时,执行设置操作(添加)
import redis
r = redis.StrictRedis(host='47.92.114.20', port=6379)
r.setnx('a', 'python') # 第一次设置时,键值a不存在
r.setnx('a', 'golang') # 再次设置,键值a已经存在了
print(r.get('a'))
# 结果
b'python'
setex(name,value,time)
# 设置值
# 参数:
# time,过期时间(数字秒 或 timedelta对象)
#!/usr/bin/env python3
#coding:utf8
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.setex('name', 'tom','1')
print (r.get('name'))
结果:
b'yaoyao'
当超过一秒
print (r.get('name'))
结果:
None
psetex(name,time_ms,value)
# 设置值
# 参数:
# time_ms,过期时间(数字毫秒 或 timedelta对象)
import redis
import time
r = redis.Redis(host='0.0.0.0', port=6379)
r.psetex('name','1','test')
print (r.get('name'))
time.sleep(0.1)
print(r.get('name'))
结果:
b'test'
None
mset(*args, **kwargs)
#批量设置值
#如:
#mset(k1='v1', k2='v2')
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.mset(name='tom',age='18')
print(r.get('name'))
print(r.get('age'))
get(name)
#获取值
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.mset(name='tom',age='18')
print(r.get('name'))
print(r.get('age'))
getrange(key, start, end)
# 获取子序列(根据字节获取,非字符)
# 参数:
# name,Redis 的 name
# start,起始位置(字节)
# end,结束位置(字节)
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.set('name','tomhhaha')
res=r.getrange('name',0,3)
print(res)
结果:
b'tomh'
settrange(name,offset,value)
# 修改字符串内容,从指定字符串索引开始向后替换(新值太长时,则向后添加)
# 参数:
# offset,字符串的索引,字节(一个汉字三个字节)
# value,要设置的值
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.set('name','tomname')
r.setrange('name',0,'python')
print(r.get('name'))
结果:
b'pythone'
setbit(name,offset,value)
# 对name对应值的二进制表示的位进行操作
# 参数:
# name,redis的name
# offset,位的索引(将值变换成二进制后再进行索引)
# value,值只能是 1 或 0
# 注:如果在Redis中有一个对应: n1 = "foo",
#那么字符串foo的二进制表示为:01100110 01101111 01101111
#所以,如果执行 setbit('n1', 7, 1),则就会将第7位设置为1,
#那么最终二进制则变成 01100111 01101111 01101111,即:"goo"
# 扩展,转换二进制表示:# source = "武沛齐"
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.set('name','python')
print(r.get('name'))
r.setbit('name','7','1')
print(r.get('name'))
结果:
b'python'
b'mython'
getbit(name,offset)
# 获取name对应的值的二进制表示中的某位的值 (0或1)
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.set('name','python')
print(r.getbit('name','2'))
结果:
1
bitcount(key,start=None,end=None)
# 获取name对应的值的二进制表示中 1 的个数
# 参数:
# key,Redis的name
# start,位起始位置
# end,位结束位置
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.set('name','python')
rint(r.bitcount('name','0','5'))
结果:
27
bitop(operation,dest,*keys)
# 获取多个值,并将值做位运算,将最后的结果保存至新的name对应的值
# 参数:
# operation,AND(并) 、 OR(或) 、 NOT(非) 、 XOR(异或)
# dest, 新的Redis的name
# *keys,要查找的Redis的name
# 如:
bitop("AND", 'new_name', 'n1', 'n2', 'n3')
# 获取Redis中n1,n2,n3对应的值,然后讲所有的值做位运算(求并集),然后将结果保存 new_name 对应的值中
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.set('n1','11')
r.set('n2','21')
r.set('n3','11')
r.bitop('AND','newname','n1','n2','n3')
print(r.get('newname'))
结果:
b'01'
strlen(name)
# 返回name对应值的字节长度(一个汉字3个字节)
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.set('name','python')
print(r.strlen('name'))
结果:
6
incr(self, name, amount = 1)
# 自增 name对应的值,当name不存在时,则创建name=amount,否则,则自增。
# 参数:
# name,Redis的name
# amount,自增数(必须是整数)
# 注:同incrby
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.set('age','1')
print(r.incr('age','2'))
结果:
3
如果没有
print(r.incr('ageno','2'))
结果
2
incrbyfloat(self,name,amount=1.0)
# 自增 name对应的值,当name不存在时,则创建name=amount,否则,则自增。
# 参数:
# name,Redis的name
# amount,自增数(浮点型)
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.set('byfloat','1')
print(r.incrbyfloat('byfloat','2.0'))
结果:
3.0
decr(self, name, amount=1)
# 自减 name对应的值,当name不存在时,则创建name=amount,否则,则自减。
# 参数:
# name,Redis的name
# amount,自减数(整数)
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.set('age','11')
print(r.decr('age','2'))
append(key,value)
# 在redis name对应的值后面追加内容
# 参数:
key, redis的name
value, 要追加的字符串
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.set('age','a')
print(r.get('age'))
print(r.append('age','b'))
#结果:
b'a'
2
Hash 操作
hset(name,key,value)
# name对应的hash中设置一个键值对(不存在,则创建;否则,修改)
# 参数:
# name,redis的name
# key,name对应的hash中的key
# value,name对应的hash中的value
# 注:
# hsetnx(name, key, value),当name对应的hash中不存在当前key时则创建(相当于添加)
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.hset('noset','python','11')
print(r.hget('noset','python'))
b'11'
hmset(name,mapping)
# 在name对应的hash中批量设置键值对
# 参数:
# name,redis的name
# mapping,字典,如:{'k1':'v1', 'k2': 'v2'}
# 如:
# r.hmset('xx', {'k1':'v1', 'k2': 'v2'})
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.hmset('someset',{'k1':'v1','k2':'v2'})
print(r.hmget('someset','k1','k2'))
结果:
[b'v1', b'v2']
hget(name,key)
# 在name对应的hash中获取根据key获取value
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.hset('noset','python','11')
print(r.hget('noset','python'))
b'11'
hmget(name,keys,*args)
复制代码
作者:
小小糖
时间:
2018-4-23 14:05
# 获取name对应的集合的所有成员
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.sadd('sex1','11','44','33')
print(r.smembers('sex1'))
结果:
{b'11', b'44', b'33', b'22'}
smove(src,dst,value)
# 将某个成员从一个集合中移动到另外一个集合
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.sadd('sex1','11','44','33')
r.sadd('sex2','22','55','66')
r.smove('sex1','sex2','11')
print(r.smembers('sex2'))
spop(name)
# 从集合的右侧(尾部)移除一个成员,并将其返回
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.sadd('sex1','11','44','33')
print(r.smembers('sex1'))
print(r.spop('sex1'))
srandmember(name,numbers)
# 从name对应的集合中随机获取 numbers 个元素
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.sadd('sex1','11','44','33')
print(r.srandmember('sex1','2'))
结果:
[b'44', b'11']
srem(name,values)
# 在name对应的集合中删除某些值
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.sadd('sex1','11','44','33')
r.srem('sex1','11')
print(r.smembers('sex1'))
结果:
{b'44', b'33'}
sunion(keys,*args)
# 获取多一个name对应的集合的并集
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.sadd('sex1','11','44','33')
r.srem('sex2','11','55','66')
print(r.sunion('sex1','sex2'))
结果:
{b'11', b'22', b'44', b'33'}
sunionstore(dest,keys,*args)
# 获取多一个name对应的集合的并集,并将结果保存到dest对应的集合中
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.sadd('sex1','11','44','33')
r.srem('sex2','11','55','66')
r.sunionstore('sex3','sex1','sex2')
print(r.smembers('sex3'))
结果:
{b'22', b'11', b'33', b'44'}
sscan(name,cursor=0,match=None,count=None)
1
# 同字符串的操作,用于增量迭代分批获取元素,避免内存消耗太大
sscan_iter(name,match=None,count=None)
1
# 同字符串的操作,用于增量迭代分批获取元素,避免内存消耗太大
有序集合操作
在集合的基础上,为每个元素排序,元素的排序需要根据另外一个值来进行比较,所以,对于有序集合,
每一个元素有两个值,即:值和分数,分数专门用来做排序。
zadd(name,*args,**kwargs)
# 在name对应的有序集合中添加元素
# 如:
# zadd('zz', 'n1', 1, 'n2', 2)
# 或
# zadd('zz', n1=11, n2=22)
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.zadd('znum', n1=11, n2=22,n3=33)
zcard(name)
# 获取name对应的有序集合元素的数量
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.zadd('znum', n1=11, n2=22,n3=33)
print(r.zcard('znum'))
zcount(name,min,max)
# 获取name对应的有序集合中分数 在 [min,max] 之间的个数
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.zadd('znum', n1=11, n2=22,n3=33)
print(r.zcount('znum','11','22'))
结果:
2
zincrby(name,value,amount)
# 自增name对应的有序集合的 name 对应的分数
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.zadd('znum', n1=11, n2=22,n3=33)
print(r.zincrby('znum','22','1'))
结果:
1.0
r.zrange(name, start, end, desc=False, withscores=Flase, score_cast_func=float)
# 按照索引范围获取name对应的有序集合的元素
# 参数:
# name,redis的name
# start,有序集合索引起始位置(非分数)
# end,有序集合索引结束位置(非分数)
# desc,排序规则,默认按照分数从小到大排序
# withscores,是否获取元素的分数,默认只获取元素的值
# score_cast_func,对分数进行数据转换的函数
# 更多:
# 从大到小排序
# zrevrange(name, start, end, withscores=False, score_cast_func=float)
# 按照分数范围获取name对应的有序集合的元素
# zrangebyscore(name, min, max, start=None, num=None, withscores=False, score_cast_func=float)
# 从大到小排序
# zrevrangebyscore(name, max, min, start=None, num=None, withscores=False, score_cast_func=float)
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.zadd('znum', n1=22, n2=33,n3=11)
print(r.zrevrange('znum','0', '2', withscores=False, score_cast_func=float))
结果:
[b'n2', b'n1', b'n3']
zrank(name, value)
# 获取某个值在 name对应的有序集合中的排行(从 0 开始)
import redis
r = redis.Redis(host='localhost', port=6379)
r.zadd('znum', n1=22, n2=33,n3=11)
print(r.zrank('znum','22'))
结果:
0
# 更多:
#zrevrank(name, value),从大到小排序
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.zadd('znum', n1=22, n2=33,n3=11)
print(r.zrevrank('znum','22'))
结果:
zrangebylex(name, min, max, start=None, num=None)
# 当有序集合的所有成员都具有相同的分值时,有序集合的元素会根据成员的 值
#(lexicographical ordering)来进行排序,而这个命令则可以返回给定的有序集合键
# key 中, 元素的值介于 min 和 max 之间的成员
# 对集合中的每个成员进行逐个字节的对比(byte-by-byte compare), 并按照从低到高的顺序, 返回排序
后的集合成员。 如果两个字符串有一部分内容是相同的话, 那么命令会认为较长的字符串比较短的字符串要大
# 参数:
# name,redis的name
# min,左区间(值)。 + 表示正无限; - 表示负无限; ( 表示开区间; [ 则表示闭区间
# min,右区间(值)
# start,对结果进行分片处理,索引位置
# num,对结果进行分片处理,索引后面的num个元素
# 如:
# ZADD myzset 0 aa 0 ba 0 ca 0 da 0 ea 0 fa 0 ga
# r.zrangebylex('myzset', "-", "[ca") 结果为:['aa', 'ba', 'ca']
# 更多:
# 从大到小排序
# zrevrangebylex(name, max, min, start=None, num=None)
zrem(name, values)
1
2
# 删除name对应的有序集合中值是values的成员
# 如:zrem('zz', ['s1', 's2'])
zremrangebyrank(name, min, max)
1
# 根据排行范围删除
zremrangebyscore(name, min, max)
1
# 根据分数范围删除
zremrangebylex(name, min, max)
1
# 根据值返回删除
zscore(name, values)
1
# 获取name对应有序集合中 value 对应的分数
zinterstore(dest, keys, aggregate=None)
1
2
# 获取两个有序集合的交集,如果遇到相同值不同分数,则按照aggregate进行操作
# aggregate的值为: SUM MIN MAX
zunionstore(dest, keys, aggregate=None)
1
2
# 获取两个有序集合的并集,如果遇到相同值不同分数,则按照aggregate进行操作
# aggregate的值为: SUM MIN MAX
zscan(name, cursor=0, match=None, count=None, score_cast_func=float)
1
# 同字符串相似,相较于字符串新增score_cast_func,用来对分数进行操作
zscan_iter(name, match=None, count=None,score_cast_func=float)
1
# 同字符串相似,相较于字符串新增score_cast_func,用来对分数进行操作
其他常用操作
delete(*name)
# 根据删除redis中的任意数据类型
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.set('num','11')
print(r.get('num'))
r.delete('num')
print(r.get('num'))
结果:
b'11'
None
exists(name)
# 检测redis的name是否存在
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.set('num','11')
print(r.get('num'))
print(r.exists('num'))
r.delete('num')
print(r.get('num'))
print(r.exists('num'))
b'11'
True
None
False
keys(pattern='*')
# 根据模型获取redis的name
# 更多:
# KEYS * 匹配数据库中所有 key 。
# KEYS h?llo 匹配 hello , hallo 和 hxllo 等。
# KEYS h*llo 匹配 hllo 和 heeeeello 等。
# KEYS h[ae]llo 匹配 hello 和 hallo ,但不匹配 hillo
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
print(r.keys(pattern='*'))
结果:
[b'foo', b'num2', b'sex1', b'someset', b'noset', b'sex2', b'num',
b'role', b'name', b'num1', b'n3', b'newname', b'byfloat', b'n2',
b'ageno', b'name1', b'sex4', b'sex3', b'age', b'sex']
expire(name,time)
1
# 为某个redis的某个name设置超时时间
rename(src, dst)
# 对redis的name重命名为
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
r.set('xin','11')
print(r.get('xin'))
r.rename('xin','xin1')
print(r.get('xin1'))
结果:
b'11'
b'11'
move(name,db)
1
# 将redis的某个值移动到指定的db下
randomkey()
# 随机获取一个redis的name(不删除)
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
print(r.randomkey())
结果:
b'n2'
type(name)
# 获取name对应值的类型
import redis
r = redis.Redis(host='0.0.0.0', port=6379)
print(r.type('num'))
结果:
b'string'
scan(cursor=0,match=None,count=None)
1
# 同字符串操作,用于增量迭代获取key
scan_iter(match=None,count=None)
1
# 同字符串操作,用于增量迭代获取key
管道
redis默认在执行每次请求都会创建(连接池申请链接)和断开(归还连接池)一次连接操作,如果想要再
一次请求中指定多个命令,则可以使用pipline实现一次请求指定多个命令,并且默认情况下一次pipline是原子
性操作。
#!/usr/bin/env python
# -*- coding:utf-8 -*-
import redis
pool = redis.ConnectionPool(host='0.0.0.0', port=6379)
r = redis.Redis(connection_pool=pool)
# pipe = r.pipeline(transaction=False)
pipe = r.pipeline(transaction=True)
r.set('name', 'python')
r.set('age', '18')
pipe.execute()
发布与订阅
发布者:服务器
订阅者:Dashboad和数据处理
demo
#!/usr/bin/env python
# -*- coding:utf-8 -*-
import redis
class RedisHelper:
'''类'''
def __init__(self):
#链接
self.__conn = redis.Redis(host='0.0.0.0')
self.chan_sub = 'fm104.5'
#创建频道
self.chan_pub = 'fm104.5'
def public(self,info):
'''公共的'''
self.__conn.publish(self.chan_pub,info)
'''将内容发布到频道'''
return True
def subscribe(self):
pub = self.__conn.pubsub()
pub.subscribe(self.chan_sub)
pub.parse_response()
return pub
发布者
#!/usr/bin/env python
# -*- coding:utf-8 -*-
#导入模块
from redis_demo.demo import RedisHelper
#实例化
obj = RedisHelper()
#把内容发布到频道
obj.public('python')
订阅者
#!/usr/bin/env python
# -*- coding:utf-8 -*-
from redis_demo.demo import RedisHelper
obj = RedisHelper()
redis_sub = obj.subscribe()
while True:
msg= redis_sub.parse_response()
print (msg)
print(type(msg))
运行方式:
先启动demo, 启动订阅者,启动发布者,订阅者接受消息。
作者:
梦想家
时间:
2018-5-9 10:00
欢迎光临 51Testing软件测试论坛 (http://bbs.51testing.com/)
Powered by Discuz! X3.2