`
by5739
  • 浏览: 3108 次
  • 来自: ...
最近访客 更多访客>>
文章分类
社区版块
存档分类
最新评论

如何能在多个web服务器1个DB的情况下保证数据唯一?

 
阅读更多
公司里做的项目, 打算用多个web服务器, 共同连一个DB, 在某个基础表里的数据需要逻辑唯一, 既某对象(attr1="a", attr2="b")在数据库里只能存在一条记录, 由于这个基础表在用户使用中是用户自定义的, 因此有可能a,b2个用户通过web服务器a和web服务器b同时提交对象(attr1="a", attr2="b")...那么在这种情况下如何使DB里面最终只有一条记录?

公司的做法是:
public synchronized A save(A a){
    //查找数据库看有没有a
    if(没有记录){
        //锁表

        //插入记录
    }else{
        //返回数据库记录
    } 

}


但我觉得这样还是有问题啊, 因为在查数据库完了之后, 有可能另一台服务器正在保存了, 不过他们解释如果另一台服务器如果正在保存, 这边这台锁表不会成功的, 请问一下, 大家遇到这种情况是怎么处理的?

=================================
也许是我没说清楚, 后面有个同学说得对, 说白了就是多服务器下并发插入的问题, 如何能做到并发插入时保证数据唯一
下面是大家的一些方案(排名不分先后 ), 看看还有没有其他的方案:
1. 把save交给一台机器处理,然后暴露API给其他机器使用
2. 乐观锁(这个我觉得似乎不能解决并发插入问题啊)
3. 联合主键
4. 唯一索引
5. 直接往数据库里面插数据,加个时间字段,精确到毫秒级就差不多了,取最新的那个时间字段的行
6. 做一个数据库操作锁,方法调用前都要取锁,取到锁的才用执行,否则等待,这个锁可以放在缓存服务器中,集群中的所有节点连上这台缓存服务器

===============================
加说一下: 这个表是有pk的..比如表结构是:A(id pk auto_increment, attr1, attr2, attr3....)
id是数据库自己递增的, 业务要求是:attr1, attr2....任意2条数据不能重复, - -!这样是不是用唯一性索引就能解决了?
分享到:
评论
49 楼 by5739 2009-08-19  
对的, 我现在只会1web服务器1db的情况, 我很想学构架方面, 但是没找到合适的书籍, 上面兄弟有没有好的架构方面的书籍推荐? 不胜感激.....
48 楼 jameswxx 2009-08-18  
这个是属于典型的数据库封锁和并行性的问题。

你们这个在应用上解决的方案,从这可以看出你们这个团队没有人懂数据库。

如果你不想深入研究数据库锁知识,你可以看看的hibernate的锁机制。会对你有帮助。
47 楼 aacc321 2009-08-18  
对,这是一个集群问题,数据软件架构要解决的问题,我认为最好方案是ejb
46 楼 liujickson 2009-08-18  
很简单的告诉楼主,使用集群式(负载均衡)就完全不用考虑上述情况了。建议楼主多看点构架方面的书籍...
45 楼 erikchang 2009-08-17  
不就是一个简单的分布式嘛!save等操作放到统一服务器上,其他的调用就是你,哪有那么复杂的啊!
44 楼 cs_sehu 2009-08-17  
其实你们公司的做法就可以解决你提出的问题了....
在保存之前就已经查询了表里有没有相同的记录....
就算2台web服务器同时提交,在DB操作save方法的时候都会有先后顺序,
后一个save操作的时候查询的时候就有了相同的记录...就不会在save
不必要想的那么复杂.
43 楼 manyinjin 2009-08-17  
乐观锁可以解决这个问题。还有另外一种思路,就是在app server之间共享一个锁,设置一个对所有app server起作用的写锁,这个需要用一些工具,如terracotta。这样的好处是你可以不用考虑你的app 最终部署到多少台机器上,需要部署多个实例时,只需要通过简单的配置就可以保证多server并发读写的正确性。
42 楼 jamiesun 2009-08-11  
by5739 写道
lixjluck 写道
treblesoftware 写道
zelsa 写道
把save交给一台机器处理,然后暴露API给其他机器使用


如果这样子,是不是有些浪费了,而且SAVA请求过多,是不是会网络堵塞,有更好的解决方案吗。

交给一台机器也有并发的问题吧

是否考虑使用MQ的queue,所有的web发送到mq上,有一个消费者消费这些数据

这种方式有几个问题:
1、异步,不知业务允许
2、消费稍微有些慢


ps. 为什么是会员设置的数据,但是这个表有不和userId有关联。


这个是基础业务数据, 是使用者自己录入然后在上面做业务的, 是大家共享的基础数据, 所以不和userid挂钩



有什么浪费的,这样的系统本来就该用这种模式。如果save的压力过大,异步MQ是应该考虑的,数据库的能力终究是有瓶颈的,用一个集中的AppServer来处理具有更好的系统伸缩性。

41 楼 by5739 2009-08-11  
lixjluck 写道
treblesoftware 写道
zelsa 写道
把save交给一台机器处理,然后暴露API给其他机器使用


如果这样子,是不是有些浪费了,而且SAVA请求过多,是不是会网络堵塞,有更好的解决方案吗。

交给一台机器也有并发的问题吧

是否考虑使用MQ的queue,所有的web发送到mq上,有一个消费者消费这些数据

这种方式有几个问题:
1、异步,不知业务允许
2、消费稍微有些慢


ps. 为什么是会员设置的数据,但是这个表有不和userId有关联。


这个是基础业务数据, 是使用者自己录入然后在上面做业务的, 是大家共享的基础数据, 所以不和userid挂钩
40 楼 by5739 2009-08-11  
nwangwei 写道
1.针对这两个字段做唯一索引;
2.然后web服务器上直接插入,抓特定的Exception判断是不是违反了唯一性。

这个...我看行...
39 楼 airport 2009-08-11  
楼主没有把需求说的太清楚,从楼主的意思来看,只有唯一存放的APP逻辑才好解决。

否则你这种复杂判断唯一性的情况,靠数据库解决不了的。
38 楼 nwangwei 2009-08-10  
1.针对这两个字段做唯一索引;
2.然后web服务器上直接插入,抓特定的Exception判断是不是违反了唯一性。
37 楼 lixjluck 2009-08-10  
treblesoftware 写道
zelsa 写道
把save交给一台机器处理,然后暴露API给其他机器使用


如果这样子,是不是有些浪费了,而且SAVA请求过多,是不是会网络堵塞,有更好的解决方案吗。

交给一台机器也有并发的问题吧

是否考虑使用MQ的queue,所有的web发送到mq上,有一个消费者消费这些数据

这种方式有几个问题:
1、异步,不知业务允许
2、消费稍微有些慢


ps. 为什么是会员设置的数据,但是这个表有不和userId有关联。
36 楼 treblesoftware 2009-08-10  
zelsa 写道
把save交给一台机器处理,然后暴露API给其他机器使用


如果这样子,是不是有些浪费了,而且SAVA请求过多,是不是会网络堵塞,有更好的解决方案吗。
35 楼 pipilu 2009-08-10  
by5739 写道
pipilu 写道
你那是跨进程的东西,加上sychronized有用么?服务器A上的实例跟服务器B上的实例互斥?

不是, 那个是防止2个用户在同一台web服务器新增同样的数据用的


那这就不只跟多个Web应用服务器有关系了,最好能从业务上避免这种提交。
34 楼 wxjiaaa 2009-08-10  
比较支持弄个专门服务器专门处理数据库事务,其它服务器直接调用它的增删改查的接口来进行操作。对于单机操作的话应该就不会出现楼主所担心的顾虑。
33 楼 by5739 2009-08-10  
pipilu 写道
你那是跨进程的东西,加上sychronized有用么?服务器A上的实例跟服务器B上的实例互斥?

不是, 那个是防止2个用户在同一台web服务器新增同样的数据用的
32 楼 pipilu 2009-08-10  
你那是跨进程的东西,加上sychronized有用么?服务器A上的实例跟服务器B上的实例互斥?
31 楼 gloomyd 2009-08-10  
这个可以在设计上加于考虑
如果这个记录只有主键约束,则可以考虑主键在插入的时候生成,或者是使用sequence。
如果有其他的约束,可以先锁住该记录,比如oracle的select **** for update
然后再去插入或者更新操作。
30 楼 dmewy 2009-08-10  
这么简单的东西搞得这么复杂.
你要说清楚插入什么数据才会出现这种情况.
你把表设计好就行了.
你N太APP SERVER都是只一台DB.
根据你的业务把主键设计好就行了.
为何会出现两个字段肯定相同的情况?
那就说明这两个字段不适合做PK.
你再根据业务类型建立个PK就行了.
这明明就是一个表结构设计的业务问题.
这里非要搞成一个技术贴.
不懂不懂.
连锁都搞出来了..

相关推荐

    架设web服务器 test

    - **负载均衡器**:用于分发流量到多个Web服务器,提高响应速度和系统稳定性。 - **高可用性集群**:确保在某个组件出现故障时,系统仍能正常运行,提升整体可靠性。 #### 三、Web服务器配置 ##### 3.1 Web服务器...

    web服务器性能测试报告

    - **测试目的**:通过对Web服务器进行性能测试,旨在评估系统在特定负载下的响应时间与稳定性,特别是针对大量用户同时在线的情况。 - **具体目标**: - 常用操作(如进入列表、编辑、查看等)的响应时间需控制在7...

    从考勤机自动上传数据到服务器C#

    综上所述,实现“从考勤机自动上传数据到服务器C#”这一功能,需要掌握Web Service开发、C#服务编程、接口设计、数据库操作、数据安全、异常处理等多个方面的技能。通过合理的架构设计和代码组织,可以构建出一个...

    最新Web服务器与数据库服务器的连接.ppt

    【Web服务器与数据库服务器的连接】是现代互联网应用的核心组成部分,允许Web应用程序处理和存储用户数据。本文档详细介绍了Web服务器如何与数据库服务器交互,以及几种常见的数据库系统和连接方式。 首先,Web...

    解决Mysql数据库在web开发中乱码问题

    在Web开发中,数据流经多个环节:客户端输入、服务器端处理、数据库存储、服务器端读取、最后呈现给客户端。如果在任一环节的字符集设置不当,都可能引起乱码。 ### 二、解决乱码的关键步骤 #### 1. 数据库层面的...

    OLEDB驱动程序大全 PostgreSQL-OleDB-Provider

    OLEDB(Object Linking and Embedding, Database)驱动程序是一种数据访问接口,它允许应用程序以统一的方式访问多种数据源,包括数据库、文件系统、Web服务等。在本话题中,我们将深入探讨“OLEDB驱动程序大全”中...

    python配置多数据源.docx

    通过以上步骤,我们可以成功地在Django项目中配置多个数据源。这种配置方式不仅可以提高系统的性能和扩展性,还可以方便地进行数据隔离和管理。对于初学者来说,掌握这一技能对于开发复杂的Web应用具有重要意义。在...

    Microsoft oLE DB provider for DB2

    OLE DB是Microsoft的一种数据访问技术,它为应用程序提供了一种标准的方式来访问多种数据源,包括数据库、文件、Web数据等。 在深入理解"Microsoft OLE DB Provider for DB2"之前,我们首先需要了解OLE DB的基本...

    数据提供程序 ole db

    数据提供程序OLE DB是微软开发的一种数据访问接口,它允许应用程序通过统一的方式访问各种不同的数据源,包括数据库、文件系统、Web数据等。OLE DB基于组件对象模型(COM)架构,使得开发人员能够构建跨平台的数据...

    IndexedDB:浏览器里内置的数据库

    IndexedDB是Web应用程序在浏览器中存储大量数据的一种强大工具,它是HTML5标准的一部分,为离线存储和...学习和掌握IndexedDB能让你在开发高性能的Web应用时游刃有余,特别是在需要离线存储和高效数据管理的场景下。

    ASP.NET Web 数据访问 [中文]

    ### ASP.NET Web 数据访问 #### 重要知识点概览 1. **从数据库中获取数据**:介绍如何通过ASP.NET中的`SqlDataSource`控件连接到数据库,并从数据库中获取数据。 2. **数据源控件**:解释了数据源控件的概念及其在...

    一个超级简单小型的基于promise采用IndexedDB的健值存储

    - **离线可用**:数据存储在本地,即使在网络断开的情况下也能访问。 **4. idb-keyval的高级特性** - **批量操作**:通过`batch()`方法可以一次性设置多个键值对,提高性能。 - **观察变化**:使用`onchange`监听...

    Microsoft SQL Server 2012 Express LocalDB.zip

    在Visual Studio (VS) 2017中,如果你尝试打开一个依赖于数据库的.NET项目,可能会遇到错误提示,指出"web项目需要安装SQL Server 2012 Express LocalDB"。这个提示意味着你的开发环境缺少SQL Server的一个轻量级...

    SpringBoot操作多数据源(JPA+JdbcTemplate)

    在Spring Boot应用中,我们经常遇到需要连接和操作多个数据库的情况。这个场景通常出现在大型系统中,例如,可能有一个数据库用于存储用户数据,另一个数据库用于处理业务数据。本篇文章将探讨如何在Spring Boot中...

    cpp-Metaweb图形存储库服务器

    总的来说,"cpp-Metaweb图形存储库服务器"是一个深度参与图形数据管理的项目,它涉及到了图形数据库的多个关键方面,包括数据模型、查询处理、并发控制和持久化存储。开发者在构建这样一个系统时,需要深入了解图形...

    各个web服务器安装文档,及连接池的配置

    在IT行业中,Web服务器是支撑网站运行的重要基础设施。它们负责处理HTTP请求,向客户端返回响应,使得用户能够访问网页内容。本压缩包包含了三个主流的Web服务器——Tomcat、WebLogic和WebSphere的安装文档以及关于...

    metadata.db

    在Calibre中,每个电子书的条目对应数据库中的一个记录,包含多个字段,用于保存各种元数据信息。 2. 元数据类型:除了基本的书籍信息,如标题、作者、出版社、ISBN号等,metadata.db还可能包含自定义元数据,比如...

    DB2开源开发文档

    - **通用性强**:Python是一种多用途语言,不仅适用于Web开发,还广泛应用于科学计算、数据分析等多个领域。 - **易用性**:Python语法简洁明了,学习曲线平缓,是新手入门编程的好选择。 - **数据访问**:Python...

    web.py官方文档

    文档还提到了一种情况,即对于多个同名的输入项,web.input()会将它们作为列表返回,这对于处理复选框等场景非常有用。文件内容还涉及到文件上传的处理,这是Web应用程序中常见的需求之一。 其次,文档内容中涉及到...

Global site tag (gtag.js) - Google Analytics