解决mysql的问题:

查询的速度
把数据存储到内存中

不需要提前定义好字段
{}NoSQL分类:

1. memcache 问题: - 数据存放到内存, 不能落地,持久化 - 支持数据类型太少,只支持字符串 2. MongoDB - 数据存放到内存, 解决了数据的持久化 - 支持多种数据类型 3. redis - 数据存放到内存, 解决了数据的持久化 - 支持5大数据类型格式 用的多:微博常见操作1. 对于key的所有操作

del key1 key2 … keyn

作用:删除1个或者多个键
返回值:不存在的key忽略掉,返回真正删除的key的数量

rename key newkey

作用:给key附一个新的key名
注:如果说newkey的值已经存在,则newkey的原值被覆盖

renamenx key newkey

作用:把key改名为newkey
返回:发生修改返回1,未发生修改返回0

move key db

redis 127.0.0.1:6379[1]> select 2
OK
redis 127.0.0.1:6379[2]> keys (empty list or set)redis 127.0.0.1:6379[2]> select 0OKredis 127.0.0.1:6379> keys
1) “name”
2) “cc”
3) “a”
4) “b”
redis 127.0.0.1:6379> move cc 2
(integer) 1
redis 127.0.0.1:6379> select 2
OK
redis 127.0.0.1:6379[2]> keys *
1) “cc”
redis 127.0.0.1:6379[2]> get cc
“3”
(注意: 一个redis进程,可以打开不止一个数据库, 默认打开16个数据库,从0到15编号,如果想打开更多数据库,可以从配置文件修改)

keys pattern

pattern可选择如下:
: 通配任意多个字符?: 通配单个字符[]: 通配括号内的某1个字符redis 127.0.0.1:6379> flushdbOKredis 127.0.0.1:6379> keys
(empty list or set)
redis 127.0.0.1:6379> mset one 1 two 2 three 3 four 4
OK
redis 127.0.0.1:6379> keys o1) “one”redis 127.0.0.1:6379> key o
(error) ERR unknown command ‘key’
redis 127.0.0.1:6379> keys *o
1) “two”
redis 127.0.0.1:6379> keys ???
1) “one”
2) “two”
redis 127.0.0.1:6379> keys on?
1) “one”
redis 127.0.0.1:6379> set ons yes
OK
redis 127.0.0.1:6379> keys on[eaw]
1)”one”

randomkey 返回随机key

exists key 判断key是否存在 返回1/0

type key 返回key存储的值的类型 有string link set order set hash

ttl key 查询key的生命周期

expire key 整型值 设置key的生命周期

pexpire key 毫秒数, 设置生命周期

pttl key, 以毫秒返回生命周期

persist key 把指定key设置为永久有效

注:对于不存在的key或已过期的key/不过期的key,都返回-1
Redis2.8中,对于不存在的key,返回-2

2. 字符串操作

set key value [ex 秒数] / [px 毫秒数]

set a 1 ex 10 , 10秒有效Set a 1 px 9000 , 9秒有效注: 如果ex,px同时写,以后面的有效期为准如 set a 1 ex 100 px 9000, 实际有效期是9000毫秒

mset multi set

一次性设置多个键值mset key1 v1 key2 v2 ....

get key

获取key的值

mget key1 key2 ..keyn

获取多个key的值

getset key newvalue

获取并返回旧值,设置新值redis 127.0.0.1:6379> set cnt 0OKredis 127.0.0.1:6379> getset cnt 1"0"redis 127.0.0.1:6379> getset cnt 2"1"

incr key

作用: 指定的key的值加1,并返回加1后的值

incrby key number

redis 127.0.0.1:6379> incrby age 90(integer) 92

incrbyfloat key floatnumber

redis 127.0.0.1:6379> incrbyfloat age 3.5"95.5"

decr key

redis 127.0.0.1:6379> set age 20OKredis 127.0.0.1:6379> decr age(integer) 19

decrby key number

redis 127.0.0.1:6379> decrby age 3(integer) 16

应用场景

在登录的时候,可以控制频控

3. 链表操作

lpush key value

作用: 把值插入到链表头部

rpop key

作用: 返回并删除链表尾元素

rpush,lpop: 不解释

lrange key start stop

作用: 返回链表中[start ,stop]中的元素规律: 左数从0开始,右数从-1开始

ltrim key start stop

作用: 剪切key对应的链接,切[start,stop]一段,并把该段重新赋给key

lindex key index

作用: 返回index索引上的值,如 lindex key 2

llen key

作用:计算链接表的元素个数redis 127.0.0.1:6379> llen task(integer) 3redis 127.0.0.1:6379>

linsert key after|before search value

作用: 在key链表中寻找’search’,并在search值之前|之后,.插入value注: 一旦找到一个search后,命令就结束了,因此不会插入多个value

场景: 长轮询Ajax,在线聊天时,能够用到

4. 集合set操作

sadd setname value1 value2

作用: 往集合setname中增加元素

srem value1 value2

作用: 删除集合中集为 value1 value2的元素返回值: 忽略不存在的元素后,真正删除掉的元素的个数

spop key

作用: 返回并删除集合中key中1个随机元素

srandmember key

作用: 返回集合key中,随机的1个元素.

sismember key value

作用: 判断value是否在key集合中是返回1,否返回0

smembers key

作用: 返回集中中所有的元素

scard key

作用: 返回集合中元素的个数

smove source dest value

作用:把source中的value删除,并添加到dest集合中

sinter s1 s2 s3

作用: 求出s1 s2 s3 三个集合中的交集,并返回redis 127.0.0.1:6379> sadd s1 0 2 4 6(integer) 4redis 127.0.0.1:6379> sadd s2 1 2 3 4(integer) 4redis 127.0.0.1:6379> sadd s3 4 8 9 12(integer) 4redis 127.0.0.1:6379> sinter s1 s2 s31) "4"redis 127.0.0.1:6379> sinter s3 s1 s21)"4"

sinterstore dest s1 s2 s3

作用: 求出s1 s2 s3 三个集合中的交集,并赋给dest

suion s1 s2 s3.. sn

作用: 求出s1 s2 s3.. sn的并集,并返回

sdiff s1 s2 s3

作用: 求出s1与s2 s3的差集即s1-s2-s35. 有序集合order set操作

zadd s1 score1 value1 score2 value2 ..

redis 127.0.0.1:6379> zadd stu 18 lily 19 hmm 20 lilei 21 lilei(integer) 3

zrem s1 value1 value2 ..

作用: 删除集合中的元素

zremrangebyscore sname min max

作用: 按照socre来删除元素,删除score在[min,max]之间的redis 127.0.0.1:6379> zremrangebyscore stu 4 10(integer) 2redis 127.0.0.1:6379> zrange stu 0 -11) "f"

zremrangebyrank sname start end

作用: 按排名删除元素,删除名次在[start,end]之间的redis 127.0.0.1:6379> zremrangebyrank stu 0 1(integer) 2redis 127.0.0.1:6379> zrange stu 0 -11) "c"2) "e"3) "f"4) "g"

zrank key member

查询member的排名(升序 0名开始)

zrevrank key memeber

查询 member的排名(降序 0名开始)

ZRANGE key start stop [WITHSCORES]

把集合排序后,返回名次[start,stop]的元素默认是升续排列 Withscores 是把score也打印出来

zrevrange key start stop

作用:把集合降序排列,取名字[start,stop]之间的元素

zrangebyscore key min max [withscores] limit offset N

作用: 集合(升续)排序后,取score在[min,max]内的元素,并跳过 offset个, 取出N个redis 127.0.0.1:6379> zadd stu 1 a 3 b 4 c 9 e 12 f 15 g(integer) 6redis 127.0.0.1:6379> zrangebyscore stu 3 12 limit 1 2 withscores1) "c"2) "4"3) "e"4) "9"

zcard key

返回元素个数

zcount key min max

返回[min,max] 区间内元素的数量6. Hash数据结构操作

hset key field value

作用: 把hash表中 filed域的值设为value注:如果没有field域,直接添加,如果有,则覆盖原field域的值

hmset key field1 value1 [field2 value2 field3 value3 ……fieldn valuen]

作用: 设置field1->N 个域, 对应的值是value1->N(对应PHP理解为 $key = array(file1=>value1, field2=>value2 ....fieldN=>valueN))

hget key field

作用: 返回key中field域的值

hmget key field1 field2 fieldN

作用: 返回key中field1 field2 fieldN域的值

hgetall key

作用:返回key中,所有域与其值

hdel key field

作用: 删除key中 field域

hlen key

作用: 返回key中元素的数量

hexists key field

作用: 判断key中有没有field域

hincrby key field value

作用: 是把key中的field域的值增长整型值value

hincrby float key field value

作用: 是把key中的field域的值增长浮点值value

hkeys key

作用: 返回key中所有的field

hvals key

作用: 返回key中所有的value


安装REDIS模块1. pip安装

pip3 install redis2. 源码安装

wget https://pypi.python.org/packages/source/r/redis/redis-2.9.1.tar.gztar xvzf redis-2.9.1.tar.gzcd redis-2.9.1python setup.py installPYTHON操作REDIS

redis连接实例是线程安全的,可以直接将redis连接实例设置为一个全局变量,直接使用

>>> import redis>>> r = redis.Redis(host='localhost',port=6379,password='', db=0)>>> r.set('guo','shuai')True>>> r.get('guo')'shuai'>>> r['guo'] 'shuai'>>> r.keys()['guo']>>> r.dbsize() #当前数据库包含多少条数据 1L>>> r.delete('guo')1>>> r.save() #执行“检查点”操作,将数据写回磁盘。保存时阻塞True>>> r.get('guo');>>> r.flushdb() #清空r中的所有数据True

我们发现,其实python操作redis中使用的方法非常的简单,和我们之前在命令行学习redis的时候,使用的方法是一样的

PIPELINE操作

管道(pipeline)是redis在提供单个请求中缓冲多条服务器命令的基类的子类。它通过减少服务器-客户端之间反复的TCP数据库包,从而大大提高了执行批量命令的功能

>>> p = r.pipeline() --创建一个管道>>> p.set('hello','redis')>>> p.sadd('faz','baz')>>> p.incr('num')>>> p.execute()[True, 1, 1]>>> r.get('hello')'redis'

管道的命令可以写在一起,如:

>>> p.set('hello','redis').sadd('faz','baz').incr('num').execute()

常见的一些应用场景1. 统计页面点击数

论坛的每个帖子都要记录点击次数,而点击次数比回帖的次数的多得多。如果使用关系数据库来存储点击,可能存在大量的行级锁争用。所以,点击数的增加使用redis的INCR命令最好不过了

当redis服务器启动时,可以从关系数据库读入点击数,假设1237这个页面被访问了34634次,因此我们使用如下的方法初始化:

>>> r.set("visit:1237:totals",34634)True

每当有一个页面点击,则使用INCR增加点击数即可

>>> r.incr("visit:1237:totals")34635>>> r.incr("visit:1237:totals")34636

页面载入的时候则可直接获取这个值

>>> r.get ("visit:1237:totals")'34636'

类似的场景:当页面登录发送验证码的时候,为了控制用户发送的次数,也可以采用这种方法进行频率控制

2. 如何保存一个对象数据

由于非关系数据库没有固定的列,因此如何去存储一个数据对象,我们可以使用hash类型保存多样化的对象

比如说,我们想要保存用户的年龄,email,手机号等内容

>>> r.hset('users:jdoe', 'name', "John Doe")1L>>> r.hset('users:jdoe', 'email', 'John@test.com')1L>>> r.hset('users:jdoe', 'phone', '1555313940')1L>>> r.hincrby('users:jdoe', 'visits', 1)1L>>> r.hgetall('users:jdoe'){'phone': '1555313940', 'name': 'John Doe', 'visits': '1', 'email': 'John@test.com'}>>> r.hkeys('users:jdoe')['name', 'email', 'phone', 'visits']3. 社交圈子数据

在社交网站中,每一个圈子(circle)都有自己的用户群。通过圈子可以找到有共同特征(比如某一体育活动、游戏、电影等爱好者)的人。当一个用户加入一个或几个圈子后,系统可以向这个用户推荐圈子中的人

我们定义这样两个圈子,并加入一些圈子成员

>>> r.sadd('circle:game:lol','user:debugo')1>>> r.sadd('circle:game:lol','user:leo')1>>> r.sadd('circle:game:lol','user:Guo')1>>> r.sadd('circle:soccer:InterMilan','user:Guo')1>>> r.sadd('circle:soccer:InterMilan','user:Levis')1>>> r.sadd('circle:soccer:InterMilan','user:leo')1

获得某一圈子的成员

>>> r.smembers('circle:game:lol')set(['user:Guo', 'user:debugo', 'user:leo'])

使用集合运算来得到几个圈子的共同成员

>>> r.sinter('circle:game:lol', 'circle:soccer:InterMilan')set(['user:Guo', 'user:leo'])>>> r.sunion('circle:game:lol', 'circle:soccer:InterMilan')set(['user:Levis', 'user:Guo', 'user:debugo', 'user:leo'])4. 反垃圾系统

获取某段时间所有数据排重值,这个使用Redis的set数据结构最合适了,只需要不断地将数据往set中扔就行了,set意为集合,所以会自动排重

5. Pub/Sub构建实时消息系统

Redis的Pub/Sub系统可以构建实时的消息系统,比如很多用Pub/Sub构建的实时聊天系统的例子。

使用办法:订阅端: Subscribe 频道名称发布端: publish 频道名称 发布内容客户端例子:redis 127.0.0.1:6379> subscribe newsReading messages... (press Ctrl-C to quit)1) "subscribe"2) "news"3) (integer) 11) "message"2) "news"3) "good good study"1) "message"2) "news"3) "day day up"服务端例子:redis 127.0.0.1:6379> publish news 'good good study'(integer) 1redis 127.0.0.1:6379> publish news 'day day up'(integer) 16. Session共享存入redis

我们可以把Session存入redis,来进行共享

存储配置:

安装包:

pip3 install django-redis-sessions==0.5.6修改setting的配置,增加session配置

SESSION_ENGINE = 'redis_sessions.session'SESSION_REDIS_HOST = 'localhost' SESSION_REDIS_PORT = 6379 SESSION_REDIS_DB = 4 SESSION_REDIS_PASSWORD = '' SESSION_REDIS_PREFIX = 'session'url配置:

url(r'^set_session$', views.set_session), # 保存session数据url(r'^get_session$', views.get_session), # 获取session数据views代码:

def set_session(request): """"保存session数据""" request.session['username'] = 'Django' request.session['verify_code'] = '123456' return HttpResponse('保存session数据成功')def get_session(request): """获取session数据""" username = request.session.get('username') verify_code = request.session.get('verify_code') text = 'username=%s, verify_code=%s' % (username, verify_code) return HttpResponse(text)通过redis-cli的客户端查看:

127.0.0.1:6379> select 4OK127.0.0.1:6379[4]> keys *1) "session:0bjyuegx0i5ivyuzpb8ezgo0b35u2z4v"