`

百万级用户量的站内信群发数据库设计

 
阅读更多
随着WEB2.0的发展,用户之间的信息交互也变得十分庞大,而且实时性要求越来越高。现在很多SNS网站和一部分CMS网站都广泛地应用了站内信这一模块,这个看似简单的东西其实背后隐藏着很多需要设计师重视的设计细节,要做好这个“邮递员”是很不容易的。为什么这么说呢?下面我们就一步步来探索设计一个百万级用户量的站内信群发 数据库,看完以后你就会明白什么是真正可靠高效的“邮递员”。

1、几十——几百的用户量

这样的网站规模最小,可能是一个中小企业的CMS系统,面对这样的用户量,我们就不必要考虑短消息数据量太大的问题了,所以按照怎么方便怎么来的原则,群发就每人复制一条消息数据,这样用户可以自己管理自己的消息,可以非常方便进行“已读、未读、删除”等操作。按照这个思路,我们的数据库设计如下:

表T_Message
1
2
3
4
5
6

Id            bigint       --消息ID
SenderId      bigint       --发送者ID
ReceiverId    bigint       --接收者ID
SendTime      datetime    --发送时间
ReadFlag      tinyint     --已读标志
MessageText   text        --消息正文

这样,我们接受自己的消息时只要做如下查询:
1

SELECT * FROM T_Message WHERE ReceiverId=myid

查询自己的未读消息只要做如下查询:
1

SELECT * FROM T_Message WHERE ReceiverId=myid and ReadFlag=0

这种方法很简单,可能是我们第一个想到的,对于这样的用户量的情况这样的设计确实也足够了。



2、几千——几万的用户量

用户量到了这样的级哦别,这个网站应该算是比较大了,笔者估计,可能是一个地区性的SNS网站。那么面对这样的用户量,我们又该如何来设计站内信群发呢?上面第一种思路还行得通吗?应该这样说,如果勉强要用上面那种设计,也是可以的,只不过T_Message可能要考虑分区。但是,大家会不会觉得消息正文复制那么多条对于这样的用户量来讲空间浪费太大,因为考虑到接收者一般是不修改消息正文的,所以我们可以让所有接收者共享一条消息正文。具体数据库设计方法和上面大同小异:

T_Message
1
2
3
4
5
6

Id              bigint       --消息ID
SenderId        bigint       --发送者ID
ReceiverId      bigint       --接收者ID
SendTime        datetime    --发送时间
ReadFlag        tinyint     --已读标志
MessageTextId   bigint       --这里把消息正文内容换成消息正文Id

T_MessageText
1
2
3

Id              bigint       --ID标识
SenderId        bigint       --发送者ID
MessageText     text        --消息正文

这样,我们就大大节省了消息的存储空间,但是查询的时候就稍微麻烦一点,就需要进行联合查询了,查询自己的未读消息可以这样(意思一下,可能还有更高效的查询方式):
1
2
3

SELECT T_Message.*,T_MessageText.* FROM T_Message
INNER JOIN T_MessageText ON T_Message.MessageTextId=T_MessageText.Id
WHERE T_Message.ReceiverId=myid AND T_Message.ReadFlag=0

用这种方法除了正文我们不能随便删除外,用户还是可以自己管理自己的消息。



3、百万级大用户量

如果一个网站到了百万级的用户量了,那我不得不膜拜该网站和网站经营者了,因为经营这样的网站一直是笔者的梦想:)好了,回归正题,如果这样的系统放你面前,让你设计一个站内信群发数据库,你该何去何从,总之,上面两种常规的办法肯定是行不通了的,因为庞大的数据量会让消息表撑爆,即使你分区也无济于事。这时候作为一个系统架构师的你,可能不仅仅要从技术的角度去考虑这个问题,更要从用户实际情况去着手寻找解决问题的办法。这里,有一个概念叫“活跃用户”,即经常登录网站的用户,相对于那些一时冲动注册而接下来又从来不登录的用户来说,活跃用户对网站的忠诚度很高,从商业的角度来讲,忠诚的客户享受更高端的服务。

根据这个思路,我们来探索一种方法。假设网站有500万注册用户,其中活跃用户为60万(这个比例真很不错了),现在我们要对所有用户群发一封致谢信。还是上面两张表,首先我们可以先往消息表中插入一条群发标识为-1 的消息,这里我们用字段SourceMessageId(原始消息)来标识(-1为原始群发消息本身,其他则是原始消息id),这样其实群发的工作已经完成了,用户可以看到这条公共的消息了。但是用户需要有消息的控制权,所以必须让每个用户拥有一条自己的消息。要达到这个目的,我们可以让用户登录时检查是否已经拷贝原始消息,如果没有拷贝,则拷贝一份原始消息并插入消息表,群发标识为原始消息的id ;如果已经存在原始消息的拷贝,则什么都不做。这样,我们就只要为这60万活跃用户消耗消息空间就可以了。具体数据库设计如下:

T_Message
1
2
3
4
5
6
7

Id                  bigint       --消息ID
SenderId            bigint       --发送者ID
ReceiverId          bigint       --接收者ID,如果为原始群发消息则为-1
SendTime            datetime    --发送时间
ReadFlag            tinyint     --已读标志,如果为原始群发消息则统一为0未读
SourceMessageId     bigint       --如果为-1则为原始群发消息,其他则为原始消息id
MessageTextId       bigint       --这里把消息正文内容换成消息正文Id

表T_MessageText 与上面方法的一样。

当然,如果你的活跃用户达到100%,那这种方法相对前一种就没有优势了,但这种情况基本上不太可能,所以,笔者觉得这种方法来处理大用户量的消息群发还是可行的。



4、总结

本文只是大致阐述了实现的原理,很多细节都忽略没有考虑,纯粹一个设计想法而已,有兴趣的朋友可以去自己实践一下,另外,笔者对数据库也不是很精通,如果有哪里阐述错误的还请指出,让我们一起进步。

转【王国峰】
分享到:
评论

相关推荐

    站内信设计方案.pdf

    通过对应用场景的分析、功能需求的梳理、系统流程的设计以及数据库结构的精心构建,可以保证站内信系统在用户体验和系统稳定性上的双重优化。随着功能的不断完善和优化,站内信系统将成为运维平台不可或缺的一部分,...

    百万级数据在Excel和Sql数据库之间相互导入、导出

    在IT行业中,处理大量数据是常见的任务,尤其是在百万级数据量的情况下。Excel和SQL Server都是常用的工具,但它们各自在处理大数据方面的优缺点明显。本文将深入探讨如何在Excel和SQL Server之间有效地进行百万级...

    教务管理系统 数据库设计

    教务管理系统的数据库设计是一个复杂但至关重要的过程,它直接影响到系统的稳定运行和用户体验。通过详细的需求分析、事务需求分析、概念设计、逻辑设计以及物理设计等步骤,可以确保最终设计出的数据库既能满足当前...

    广工数据库课程设计(全)

    课程设计可能还包括性能优化,如索引的创建和使用,查询优化,以及如何通过数据库分区和分片来处理大数据量。此外,事务处理和并发控制也是数据库系统中不可或缺的部分,它们确保了数据的一致性和完整性。 安全性是...

    网上订餐系统(数据库设计方案)

    综上所述,网上订餐系统的数据库设计方案是一个复杂而全面的过程,涵盖了用户、餐厅、菜品、订单、支付、配送、评价等多个方面。通过精心设计,可以构建出高效、稳定且用户友好的在线订餐平台。

    学生成绩管理系统-数据库设计

    学生成绩管理系统数据库设计 本系统的最终用户为管理员,旨在满足学校管理员对成绩管理的需求。系统的主要功能包括用户查询部分和管理员管理部分。在用户查询部分,管理员可以查询学生信息、成绩信息等。在管理员...

    网上购物商城数据库设计

    ### 网上购物商城数据库设计详解 #### 一、数据库设计概述 在构建一个功能完善的网上购物商城系统时,数据库的设计是整个项目的核心部分之一。合理的数据库设计不仅能够提高系统的运行效率,还能够保障数据的安全...

    8个数据库设计典型实例

    ### 数据库设计典型实例概述 本文将针对八个典型的数据库设计实例进行深入解析,涉及人力资源管理、销售、仓储等多个领域。每个实例都将从实际应用场景出发,详细介绍其设计思路、功能需求和技术实现。 ### 实例1...

    数据库课程设计 图书管理系统

    图书管理系统是一个典型的数据库应用案例,它涉及到多个方面,包括数据模型设计、数据库表结构规划、查询优化以及用户界面设计等。在这个项目中,学生将有机会实践如何构建一个能够有效地管理和检索图书信息的系统。...

    图书销售管理系统数据库课程设计

    图书销售管理系统数据库课程设计是一项旨在实现书店自动化管理的实践项目,涵盖了用户管理、图书管理、图书销售管理、查询管理、报表查询以及数据管理等多个关键功能。以下是对这些功能的详细阐述: 1. 用户管理:...

    商品销售管理系统 数据库 课程设计

    《商品销售管理系统数据库课程设计详解》 在信息技术领域,数据库设计是至关重要的环节,尤其在构建商品销售管理系统这样的业务系统时。本课程设计旨在通过实际操作,帮助学习者掌握数据库设计的基本理论和实践技巧...

    C# Excel大量数据快速导入数据库源码

    本主题涉及的是如何使用C#高效地将Excel中的大量数据导入到数据库,这在数据分析、报表生成以及企业级应用中是非常常见的需求。源码提供了一种实现方式,可以在实际项目中直接应用。 首先,`Frm_ReadExcel.cs`可能...

    数据库课程设计-JAVA实现学生信息管理系统

    在本项目中,“数据库课程设计-JAVA实现学生信息管理系统”是一个用Java编程语言开发的教育实践项目,旨在帮助学习者理解和应用数据库管理系统的概念。这个系统主要目标是管理和操作学生的信息,提供一个用户友好的...

    数据库商品销售管理系统课程设计

    综上所述,数据库商品销售管理系统课程设计涵盖了数据库设计、数据操作、权限管理、用户交互、系统测试等多个IT领域的知识点,对于学习者来说,这是一个全面了解和掌握信息系统开发的宝贵实践机会。

    学生成绩管理系统+数据库课程设计 学生成绩管理系统+数据库课程设计

    学生成绩管理系统与数据库课程设计是一项综合性的任务,旨在让学生理解和掌握数据库系统在实际应用中的设计、实现和管理。在这个项目中,学生需要构建一个能够处理学生成绩数据的系统,同时利用数据库技术来存储、...

    学生宿舍管理系统的数据库设计(包括数据流图 实体关系图)

    学生宿舍管理系统数据库设计概要...学生宿舍管理系统的数据库设计旨在为不同用户群体提供便捷的信息管理服务,通过数据流图、实体关系图和数据库设计,系统能够实时地管理学生宿舍的各种信息,提高管理效率和服务质量。

    phpems数据库设计

    以上只是phpems数据库设计的一部分,实际系统可能还包括其他功能相关的表,如用户个人信息表、试题难度表、试题来源表等。需要注意的是,描述中提到部分字段需要自己解决,这可能涉及到系统特定的需求或个性化设置,...

    数据库系统设计,实现和管理

    《数据库系统设计,实现和管理》一书深入探讨了这些主题,特别是在第八版中,作者提供了最新的理论与实践相结合的知识。本篇文章将根据标题和描述,以及相关书籍章节,详细阐述数据库系统设计、实现和管理的关键知识...

    数据库课程设计 校园用电管理系统.rar

    数据库课程设计是IT教育中的一个重要环节,旨在让学生深入理解数据库原理并将其应用于实际项目中。本项目名为“校园用电管理系统”,它是一个利用Visual C++编程语言实现的系统,结合了ODBC(Open Database ...

    报刊订阅管理系统【SQLServer数据库+课程设计文档】

    报刊订阅管理系统【SQLServer数据库+课程设计文档】 1.需求分析 1.1系统需求分析 1.1.1系统调查 1.1.2用户需求 1.1.3 可行性分析 1.1.4系统业务流程图 1.2 系统逻辑方案 1.2.1 数据流图(简称DFD) 1.2.2数据...

Global site tag (gtag.js) - Google Analytics