`
123003473
  • 浏览: 1064463 次
  • 性别: Icon_minigender_1
  • 来自: 南京
社区版块
存档分类
最新评论

如何使用Redis 做队列操作

 
阅读更多


先来点佐料吧,看:

Reids是一个比较高级的开源key-value存储系统,采用ANSI C实现。其与memcached类似,但是支持持久化数据存储,同时value支持多种类型:字符串 (同memcached中的value),列表 ,集合 (Set),有序集合 (OrderSet)和Hash 。所有的值类型均支持原子操作,如列表中追加弹出元素,集合中插入移除元素等。Rdids的数据大部分位于内存中,其读写效率非常高,其提供AOF(追加 式操作记录文件)和DUMP(定期数据备份)两种持久化方式。Redis支持自定义的VM(虚拟内存)机制,当数据容量超过内存时,可以将部分Value 存储到文件中。同时Redis支持Master-Slave机制,可以进行数据复制。

可以把Redis的list结构当队列来用.

从上面Redis的场景和作用来说,对于我们现在的开发活动,究竟能把Redis引入在那些场景,而不是把这么好的东东演变成“为了使用Redis,而Redis”的惨烈局面呢?当然,具体问题具体分析,这个真的很重要哈。

缓存?分布式缓存?

队列?分布式队列?

某些系统应用(例如,电信、银行和大型互联网应用等)都会使用到,当然,现在大行其道的memcache就是很好的证明;但从某一方面来说,memcache是否能把两张囊括其中,而且能做到更好(没有实际的应用过,所以只是抛出)。但从Redis身上,我就能感觉到,Redis,就能把队列和缓存两张都囊括其中,而且都不会产生并发环境下的困扰,因为Redis中的操作都是原子操作来着。

至于评论两者的孰好孰坏就免了,存在就是理由,选择适合的就是最好的。



下面开始玩玩Redis中的队列(分布式)设计YY吧,请大虾们多多指点。

状况场景:

       现在的项目,都是部署在多个服务器,或者多个IP上,而且前台经由F5分发,所以用户的请求究竟落在那一台的服务器上,是无法确定的。对于项目中,有一秒杀设计,刚开始没有考虑到这种部署,同时也是使用最容易处理的方式,直接给数据库表锁行记录(Oracle上的)。可以说,对于不同的应用部署,而只有一台数据库服务器来说,很“轻松”的就解决了这个并发的问题。所以现在考虑一下,是不是挪到应用上,避免数据库服务器也掺杂到业务上。

         比如,现在有2台应用服务器,1台数据库服务器。想法是,把Redis部署在数据库服务器上,两台服务器在操作并发缓存或者队列时,先从Redis服务器上,取得在两台应用服务器的代理对象,再做入列出列的操作。

看代码实现(PHP)
入队列操作文件 list_push.php

<?php
$redis = getRedisInstance();//从Redis服务器拿到redis实例
$redis->connect('Redis服务器IP', 6379);
while (true) {
  $redis->lPush('list1', 'A_'.date('Y-m-d H:i:s'));
    sleep(rand()%3);
}
?>

执行# php list_push.php &

出队列操作 list_pop.php文件
<?php
$redis = getRedisInstance();//从Redis服务器拿到redis实例
$redis->pconnect('Redis服务器IP', 6379);
while(true) {
    try {
        var_export( $redis->blPop('list1', 10) );
    } catch(Exception $e) {
        //echo $e;   
    }

}

实现方法(Python)

        1.入队列(write.py)

        #!/usr/bin/env python

        import time

        from redis import Redis

 

        redis = Redis(host='127.0.0.1', port=6379)

        while True:

                now = time.strftime("%Y/%m/%d %H:%M:%S")

                redis.lpush('test_queue', now)

                time.sleep(1)

         2.出队列(read.py)

         #!/usr/bin/env python

         import sys

         from redis import Redis

 

         redis = Redis(host='127.0.0.1', port=6379)

         while True:

                 res = redis.rpop('test_queue')

                 if res == None:

                         pass

                 else:

                         print str(res)


在操作时,注意,要操作的是同一个list对象。

呵呵,现在的主要思路就差不多就是如此,不过真实场景中,会有出入。

【转载地址】http://hi.baidu.com/daqing15/item/b213dc7a64208f3c70442317
分享到:
评论

相关推荐

    Java操作Redis消息队列案例(应用于Socket通信)

    redis 案例。包含, 队列操作, socket通信, 以及 socket 和 redis 配合 redis 案例。包含, 队列操作, socket通信, 以及 socket 和 redis 配合

    Laravel7中Redis队列的使用

    在Laravel7中,Redis队列的使用是一个高效且灵活的方法来处理异步任务和后台工作。Redis是一个开源的、高性能的键值存储系统,它支持多种数据结构,如字符串、哈希、列表、集合和有序集合,这使得它成为处理队列的...

    微服务SpringBoot整合Redis基于Redis的Stream消息队列实现异步秒杀下单

    【微服务SpringBoot整合Redis基于Redis的Stream消息队列实现异步秒杀下单】这篇文章主要讲解了如何在微服务架构中使用SpringBoot整合Redis来构建一个基于Redis Stream的消息队列,以此来实现实时、高效的异步秒杀...

    redis做消息队列

    在本场景中,Redis作为消息队列使用,替代了传统的Kafka队列,以实现顺序消费和防止高并发时的内存溢出问题。 Redis支持多种数据结构,如字符串、哈希、列表、集合和有序集合等,这些数据结构可以巧妙地应用于消息...

    redis消息队列

    Redis 消息队列是一种基于 Redis 数据库实现的消息传递机制,它允许生产者将消息放入队列,然后由消费者从队列中取出并处理。...通过学习和实践源码示例,可以加深对 Redis 消息队列实际操作的理解。

    Qt 应用Redis 实现消息队列

    在Qt应用中集成Redis,我们通常会使用第三方库如`QRedis`,这是一个基于Qt的Redis客户端库,它提供了一系列方便的API来操作Redis。首先,你需要将`QRedis`库添加到你的Qt项目中,可以通过配置项目文件.pro或使用...

    Laravel/Lumen 使用 Redis队列

    Laravel/Lumen 使用 Redis队列 Laravel/Lumen 框架提供了一个队列系统,允许开发者将耗时操作或高并发操作异步执行,以缓解系统压力、提高系统响应速度和负载能力。在这个系统中,Redis 可以作为队列驱动,负责存储...

    Redis延时消息队列基于swoole实现的多进程消费端

    标题中的“Redis延时消息队列基于swoole实现的多进程消费端”是指使用Redis作为消息队列,结合Swoole的多进程特性来构建一个高效、可扩展的延迟消息处理系统。在这个系统中,Redis作为一个可靠的键值存储,用于暂存...

    redis高级应用-使用redis消息队列完成秒杀过期订单处理-讲义-教程

    redis高级应用-使用redis消息队列完成秒杀过期订单处理--讲义--教程 带有图片,实操源码,图文结合。 讲解 redis 下载、安装、应用。 redis 基本操作。 springDataRedis的介绍与基本操作。 redis 是一个 key-value...

    mvc - redis队列dome

    **标题解析:** "mvc - redis队列dome" 暗示了这是一个关于使用Model-View-Controller(MVC)架构模式与Redis构建队列的示例项目。MVC是一种广泛应用于Web开发的设计模式,它将应用程序分为三个主要部分:模型、视图...

    redis 队列操作的例子(php)

    Redis是一个开源的高性能...最后,值得注意的是,在使用Redis做队列操作时,虽然Redis提供了丰富的数据结构和功能,但依然需要根据实际应用场景合理选择使用场景,并且需要做好错误处理和异常监控,确保系统稳定运行。

    Go-delay-queue基于Redis实现的延迟队列

    3. **原子操作**:Redis支持原子操作,这确保了在高并发环境下任务添加、删除和处理的正确性,避免了数据竞争问题。 4. **持久化**:尽管Redis支持数据持久化,但为防止意外丢失,项目可能还实现了额外的备份策略或...

    使用redis做任务队列分发子任务

    总结起来,使用Redis作为任务队列分发子任务,能够充分利用其高性能和丰富的特性,提升分布式系统中任务处理的效率和可靠性。在实际项目中,结合业务需求,合理设计任务队列的架构和策略,可以进一步优化系统性能,...

    php队列+php-redis队列+php-redis扩展

    PHP-Redis队列则是在PHP中利用Redis内存数据库作为队列存储的解决方案。Redis是一个高性能的键值数据库,支持多种数据结构如字符串、哈希、列表、集合和有序集合。由于其内存存储特性,Redis非常适合用来实现快速的...

    redis延时队列.zip

    同时,为了保证高可用性和一致性,生产者可能还会使用Redis事务或者lua脚本来确保操作的原子性。 而DelayDataConsumer.java则扮演着消费者的角色,它的职责是不断地检查是否有到期的任务需要处理。这通常是通过执行...

    go实现redis消息队列

    - `producer`模块:负责将消息发布到Redis队列,根据Topic进行分类。 - `consumer`模块:通过Goroutine实现并发消费,处理来自不同Topic的消息,并根据Group进行分配。 - `error_handler`模块:监听处理过程中的...

    基于redis实现的消息队列

    标题中的“基于redis实现的消息队列”指的是使用Redis这一开源数据结构存储系统来构建消息队列(Message Queue, MQ)的解决方案。Redis以其高性能、丰富的数据结构和内存存储特性,常被用作构建消息队列的底层技术。...

    DelayQueue延迟队列和Redis缓存实现订单自动取消功能

    3. 使用Jedis或者其他Redis客户端连接到Redis服务器,将订单信息存储为键值对,键是订单号,值是订单数据,同时设置键的过期时间为订单的超时时间。 4. 开启一个后台线程或使用ScheduledExecutorService定期检查...

Global site tag (gtag.js) - Google Analytics