转自:http://blog.csdn.net/starxu85/archive/2008/03/29/2227158.aspx
过期机制: memcached的item过期后并不会有删除该item的操作,只会在get的时候判断是否过期。
覆盖机制: 当memcached满了的时候,过期的items将会被优先覆盖,然后是用的最少的items
锁定方法: memcached并没有提供锁定某一个key的方法,可以通过其他方法来实现锁定。最常用的是用add方法。例如,我们要更新一个key,可以先王memcached里面add一个叫lock_key的键值,如果add成功,就说明锁定上了,否则,说明memcached里面已经有lock_key这个键值,有其他程序在锁定这个key了,嗯,然后可以等待,或者退出,随便,嘿嘿,参考 http://www.socialtext.net/memcached/index.cgi?faq#emulating_locking_with_the_add_command
存放数组: 直接把整个数组存放到为一个key是一个很lame的方法。因为memcached每一个key有1M大小的硬限制,存放的数据不能超过1M,而且,如果你要删除数组中的某一个元素,必须把整个数组get回来,删掉该元素,然后再set该数组,这个操作很浪费流量,也很没有必要。当然,如果是小数组,直接存放到memcached会比较方便,也就无所谓了。我们下面的方法主要是针对比较大的数组。对于比较大的数组,可以采用以下方法: 1.采用一个key存放数组的key列表,php里面可以通过array_keys获取。数组的每一个元素值用一个key存放在memcached中,比如可以用 “数组名_元素key名” 的key值存放。这样做,有很多好处,例如,要将数组分页显示的时候,不用获取整个数组,只需要获取要显示的部分元素;更新数组元素的时候,只需要更新两个键值,就是索引和对应的元素;如果用了分布式memcached,整个数组的元素会分布到不同的服务器存放,与整个数组放在一个key值里面比较,可以大大降低某一台memcached服务器的流量……更多的好处自己去挖掘吧; 2. 上面这种方法有点很多,缺点就是如果要获取整个数组,就要像memcached发出很多请求。根据我们需求的不同,还可以提出另一种方法,适用于更新很少而且经常要获取部分数据的数组,就是将数组分段存放,嗯,例如,array_name_0_500这个key存放的是数组0-500号元素,array_name_501-1000是501-1000号元素,依次类推。这个方法的优点很明显,用来分页很赞,确定也很郁闷,就是插入或者删除元素的时候,要更新无数的key……
Multi获取: PHP的memcache:get方法支持传入array类型的参数,可以一次性获取多个key值。这样做的优点是,如果你的数据都存放在一个服务器上面,你获取这堆数据只需要发一次TCP连接请求,可以省下很多等待建立TCP连接的时间,特别是网络延时比较大的时候,嗯。
更新机制:嗯,特别请教了HL同学,怎么处理memcache内容过期的问题。我们使用memcache一般是缓存数据库的内容,特别是查询比较慢或者访问比较频繁的内容,为了保证数据的时效性,一方面,我们要有一个主动更新的机制,这个不讨论,另一方面,我们需要设置一个memcache的过期时间,当memcache内容过期的时候,会到数据库去重新获取内容更新到memcache里面。如果过期的内容是访问比较频繁的内容时,就会存在一个问题,就是过期后,可能会有很多请求试图到数据库去获取数据更新到memcache,数据库负荷会在一瞬间增大很多。要解决这种情况,就要用到预缓存机制和上面说的锁定机制,就是要在过期时间前n秒去更新内容,并且只能有一个线程更新memcache的内容,其他线程更新前,如果检测到锁,就不更新,直接返回获取到的内容。
想到在写……欢迎hl补充
分享到:
相关推荐
本资源摘要信息涵盖了 Python Web 全栈开发的学习路线,从 Linux 运维到 Python 基础、前端开发、数据库和缓存等方面都有所涉及。 Linux 运维 * Linux 安装 * 网络基础知识点 * ISO 七层模型 * Linux 基本命令 * ...
例如,使用缓存(如Memcached或Redis)减少数据库查询,优化SQL语句,或者使用CDN加速静态资源的加载。 总之,这个“php个人博客开发源码”项目是一个很好的学习起点,涵盖了Web开发的多个方面。通过实际操作,你...
- 性能优化:减少数据库查询,使用缓存技术,如APC或Memcached。 - 代码规范:遵循PSR编码标准,保持代码整洁一致。 10. **框架和工具**: 许多PHP框架如Laravel、Symfony、Yii等,提供了一套完整的开发结构和...
- 这个文本文件可能包含了视频的详细内容摘要、笔记或者时间轴,方便观众查阅和学习。 除了上述知识点,大型电商网站架构可能还会涉及到以下领域: - **负载均衡**:通过负载均衡器将请求分发到不同的服务器,...
- 在分布式环境中,Shiro的会话管理可以通过SessionManager和SessionDAO进行定制,如使用Redis或Memcached存储会话,实现会话共享。 - 跨节点的身份验证和授权,可以通过Token传递或JWT(JSON Web Tokens)实现。 ...
这些哈希函数可以把任意长度的数据转化为固定长度的摘要,但需要注意哈希碰撞的可能性。 3. **数据库操作**:使用MySQL或其他数据库系统存储原始URL和对应的短码。这需要设计合理的数据表结构,并熟练使用SQL语句...
本摘要将详细解析其中涉及的重要知识点。 1. **分布式系统架构**:大型网站往往需要处理高并发和海量数据,因此,分布式系统架构是基础。这包括负载均衡、分布式缓存、分布式数据库、分布式文件系统等,如Nginx、...
为了处理大量数据和高并发请求,可能需要考虑缓存策略,如使用Redis或Memcached来存储搜索结果。另外,负载均衡和分布式部署也是大型网站常采用的技术。 总的来说,这个"创佳PHP站内搜索"实例涵盖了PHP编程、数据库...
在Web开发中,列表页的实现是构建动态网站不可或缺的一部分。...首先,我们需要理解列表页的基本结构和功能:它通常...在学习和实践过程中,不断迭代和优化,才能不断提升自己的Web开发技能,做到“努力学习,天天向上”。
在数据库层面,系统可能采用了关系型数据库管理系统(如MySQL、PostgreSQL),用于存储文献的元数据,如作者、标题、出版年份、摘要、关键词等。这些信息可以通过SQL查询快速检索,支持高效的全文搜索和复杂条件筛选...
你可以定制搜索结果的模板,包括每条结果的标题、内容摘要、发布时间等信息。 5. **性能优化**:考虑到大规模网站的性能需求,搜索组件可能需要缓存策略。比如使用Memcached或Redis缓存搜索结果,减少数据库查询的...
5. **缓存策略**:为了提高性能,聚合器可能会使用缓存,比如Redis或Memcached,来存储最近获取的RSS内容,避免频繁的网络请求。 6. **API集成**:可能还存在与第三方API的集成,如天气API、新闻API等,以增强用户...
通过分析和学习这个源码,开发者可以深入了解如何构建一个功能丰富的资讯阅读器,提升自己的编程技能。 资讯阅读器通常涉及到以下几个关键知识点: 1. **数据获取与解析**:资讯阅读器首先需要从各种新闻源获取...
首先,MD5(Message-Digest Algorithm 5)是一种广泛使用的哈希函数,它可以将任意长度的数据转换为固定长度的摘要,通常用于数据的校验和密码存储。在PHP中,可以使用内置的`md5()`函数对字符串进行MD5加密。例如:...
总体来说,这个PHP实例开发源码是学习和理解搜索引擎联合查询实现的一个宝贵资源,可以帮助开发者深入理解如何利用PHP与第三方API进行高效交互,同时也可以作为一个起点,进一步扩展和定制自己的搜索引擎集成解决...
Rails,作为Ruby语言的一个流行框架,以其“约定优于配置”(Convention Over Configuration)的理念,极大地提高了开发效率,降低了学习曲线。 在书中,作者详细介绍了Rails的核心概念,包括MVC(模型-视图-控制器...
在C#中,可以利用Task并行库(TPL)进行并发处理,Entity Framework用于数据库操作,Redis或Memcached作为缓存解决方案。 总之,C#编写的搜索引擎源码是一个综合性的项目,涵盖了网络爬虫技术、HTML解析、文本处理...
10. 缓存技术:利用缓存(如Memcached或Redis)减少数据库访问,提高系统响应速度。还可以对静态资源(如CSS、JavaScript)进行合并和压缩,减少HTTP请求。 十一、日志记录 11. 日志系统:从文件名"tmlog"推测,这...
RSS(Really Simple Syndication)是一种广泛使用的数据格式,用于发布新闻、博客和其他在线内容的摘要,使得用户能够在一个地方集中查看多个来源的信息。AfritXia.RssFoundation是一款专为.NET平台设计的RSS聚合...
为了提高性能和减少服务器负载,lylina可能采用了缓存策略,如Redis或Memcached,来存储经常访问的数据,如最新文章列表或热门订阅源。 7. **安全与隐私** 作为一款多用户系统,lylina需要确保用户数据的安全。这...