`

大型互联网应用的技术选型和决策,10条成功与失败的记录

阅读更多

作为以老版本为模子重做的解耦版本,这个大型互联网应用产品是从2009年中开始落地的。而我本人也是该版本的主创人员之一,到今日,团队已经发展到开发测试人数百人的大型互联网产品团队的规模,发布、割接和上线了许许多多个商用版本。

 

对架构的审视,对选型和设计的反思,不仅仅要在产品初创时期,更要在产品发展的整个过程中进行,团队做同类型产品的能力就是这样在不断总结和自我批评中成熟的。以下为个人观点,难免不对许多人的胃口,不过还是希望这些文字有足够到让人思考的价值。无论如何,对于这样一款产品,从如今的视角来解读它的历史故事,更别有一番风味。

 

---------------------------------------------------------------------------------------

 

5条成功的记录:

 

1、Portlet技术作为整个架构的核心。

这一条既是成功的记录,也是失败的记录。

Portlet给各个局点的不同定制版本带来了相当的页面定制灵活性,不懂jsp的管理员都可以按照自己的要求部署页面,通过简单的选择和拖动,将一个个内容丰富的频道展现出来。

另一方面,Portlet对于栏目的扩展和定制保留了相当的灵活性,尤其是对于潜在的互联网应用按照栏目维度保持伸缩性方面,留足了空间。

 

2、持久层选择了更加轻量级的iBatis,没有选择Hibernate。

事实证明,iBatis透明、简单,易于配置和使用,多数开发人员可以读透持久层的代码,擅长数据库的开发人员可以轻易地完成Oracle下SQL语句的调优,应用到iBatis的配置文件中去,并不需要太多ORM的技术积累,也不需要深厚的Hibernate调优技巧。

 

3、业务核心逻辑层得以抽象出来,独立成可以单独发布的API模块。

面对多种接入渠道,把核心业务通过API的行为抽取出来,给项目组带来的最大好处是:清晰的团队分工。

虽然API模块还不成熟,但是API的诞生和发展意味着可以让各个接入门户的开发和定制团队更聚焦在以展现为核心的工作上面,把业务代码的梳理交给专门的API团队去做。

从长远看,纯Java的API是干净、简洁和易于UT的,通过这种天然的方式隔离了持久层,也保护了核心业务的代码质量。

 

4、将功能的界面展示部分抽取成可重用的业务标签。

有人会对这个有异议,事实上,除了FreeMarker的性能确实让人不敢恭维以外,将界面的展示部分以标签的方式组件化带来的益处是很大的。

理想状况下,定制团队可以通过简单的标签插入、删减和修改,完成页面的定制工作,这比理解宏伟复杂的jsp页面,进行拷贝粘贴大法简单了不少。

 

5、基础设施稳定且有质量保障

基础设施包括日志、协议栈、License等等,大多稳定而且易于使用。

比如异常体系,整个异常体系给开发带来了自然和轻松的异常处理流程,开发人员只需要更关注核心流程,把错误流程交给运行时异常去处理;不同的异常捕获层次给最终页面的错误展示和归纳带来便捷。

也有遗憾的地方,比如错误码比较纠结,错误码是团队内部讨论经过激烈的斗争和妥协的结果,有些过于庞大和繁杂了,这似乎更验证了:软件工程不是明主选举。

 

---------------------------------------------------------------------------------------

 

5条失败的记录:

 

1、Portlet技术作为整个架构的核心。

这一条既是成功的记录,也是失败的记录。

Portlet的许多特性还远未得到适合的发挥,譬如Portlet状态的保持、远程聚合的能力等等,却给开发人员带来了许多困扰,譬如页面分解困难,Portlet Session和Portal Session的互异性,聚合流程性能问题等等,给开发人员定制手提出了更高的要求。

 

2、独立出基于Portlet核心的负责门户运营的Portal平台。

Portlet规范作为一种聚合展现行为的抽象,通过组件化这样一种独立平台的形式,将页面控制聚合流程从业务页面展现和业务流程处理中剥离出来,开发人员得以将更多的精力聚焦在业务开发上面。

我想这是它诞生的本意,但是实际上,却带来了聚合流程复杂,方法调用栈过深等问题,而门户定制的开发人员,也必须经过相当的培训才得以上手。

 

3、通过ajax方式聚合Portal位于不同war包内的管理台页面。

本意是想让不同的管理台页面随着不同的Portal接入渠道分离发布,在展现时在页面上进行简单集成。

但由于浏览器的安全机制和对于不同域的会话独立管理的机制,使得它像恶魔一般被引进来,带来的不仅仅是定制的困难,开发人员理解的困难,还有一些因会话无法统一而导致的在不同域页面间信息传递时难以解决的问题。

 

4、保留XDIME、WML和XHTML三套WAP的模板页面。

当然也许这有一些人为无法控制的因素在里面。

XDIME页面的目的就是经过终端适配组件转换成适合手机的WML和XHTML页面的,而由于局点或某些历史原因,WML和XHTML还无法被干脆地摒弃掉,无论是一种主动的决策还是迫于无奈,带来的问题就是页面模板数量增加了两倍,给开发和测试带来了大量的工作量。

最终,WML和XHTML模板还是被抛弃了,只保留了XDIME一套模板。

 

5、缺少一套简易的和可管理的UI框架。

前端开发是整个产品的瓶颈,尽管页面并不非常复杂,前端的混乱却已经带来了诸多问题,这些问题主要暴露在产品定制和最终的用户细节体验环节上。互联网产品是否专业,很大程度上是由产品的前端团队所决定的。

依据不同的团队级别、不同的前端展示要求,需要定制不同的UI框架。由展现的简易性,而且需要定制的基线版本,决定了我们的UI框架应该简单;并且由于开发成员普遍前端能力欠佳,决定的我们的UI框架应当便于控制和管理,不应暴露过于复杂的界面行为给普通开发人员。

 

文章系本人原创,转载请注明作者和出处

 

分享到:
评论
4 楼 RayChase 2012-11-20  
lazy_ 写道
而对比freemarker的方式,速度是有一定优势的。

确实不同的模板引擎性能有差异。但是我想补充的是,这些差异也不会很大的,通常系统性能优化着力点不应该在这里。Think big。
3 楼 RayChase 2012-11-20  
1 都是用ibatis而不是用mybatis吗?
-- 本质上应该是一个东西,我记得是iBatis后来发展成myBatis了,当时我们用的iBatis。

2 我公司现在使用mybatis的做批量插入,是纯JDBC的时间的3到10倍。。。对mybatis有些不好的印象。
-- 有几种方式,
1. 批量相当于N个单次提交,这是最慢的。
2. 用它那个callback函数来做批量,插入语句N条,提交一次。次慢。
3. 还有就是一条语句同时插入N条记录。如果数据来源来自其他表,这种方式所有数据库都支持;如果数据是你通过iBatis传入的,只有部分数据库支持。更快。
4. 存储过程。最快。

最让人苦恼的是,mybatis的代码写法跟ibatis也不一样,上网找资料的时候,多数找到的是ibatis的,那个叫纠结啊!这是典型的不向旧版本兼容啊,你怎么看这个不兼容的问题的?我真的想不明白为什么会这样。。。
-- 不了解
2 楼 lazy_ 2012-11-20  
引用
2、持久层选择了更加轻量级的iBatis,没有选择Hibernate。
事实证明,iBatis透明、简单,易于配置和使用,多数开发人员可以读透持久层的代码,擅长数据库的开发人员可以轻易地完成Oracle下SQL语句的调优,应用到iBatis的配置文件中去,并不需要太多ORM的技术积累,也不需要深厚的Hibernate调优技巧。


确实,貌似淘宝都是喜欢用ibatis,招聘要求也是写ibatis。

我有几个疑问,不知道您可不可以回复一下。。。
1 都是用ibatis而不是用mybatis吗?

2 我公司现在使用mybatis的做批量插入,是纯JDBC的时间的3到10倍。。。对mybatis有些不好的印象。

最让人苦恼的是,mybatis的代码写法跟ibatis也不一样,上网找资料的时候,多数找到的是ibatis的,那个叫纠结啊!这是典型的不向旧版本兼容啊,你怎么看这个不兼容的问题的?我真的想不明白为什么会这样。。。
1 楼 lazy_ 2012-11-20  
引用
将功能的界面展示部分抽取成可重用的业务标签。
有人会对这个有异议,事实上,除了FreeMarker的性能确实让人不敢恭维以外,将界面的展示部分以标签的方式组件化带来的益处是很大的。


问题:FreeMarker性能成问题,是不是意味着有别的更好的做标签的方案?你都是用JAVA来写标签的吗?难道就是那种原始的那种继承BodyTagSupport的?

-----------------------
PS:
我们公司现在做的标签,多数是结合struts2的ComponentTagSupport,AbstractUITag,UIBean和freemarker来做的,性能确实有些低。。。

后面做一些简单系统的时候,我用了最简单的一种方式来生成具体的UI 的HTML——jsp:include.

例如创建一个jsp,需要引入一个列表UI,那么写代码
<jsp:include page="component/list.jsp">
    <jsp:param value="" name="whereCls"></jsp:param>
    <jsp:param value="" name="maxRows"></jsp:param>
</jsp:include>
就OK了。

jsp:include对比原始的BodyTagSupport在JAVA中write一大堆HTML代码的方式,这种方式爽多了(也许我不知道bodyTag有更好的生成HTML的方式?),而且简单易学。唯一的缺点就是,引用控件的代码长了点。

而对比freemarker的方式,速度是有一定优势的。

相关推荐

    移动应用开发技术选型策略.pdf

    移动应用开发技术的发展非常迅速,移动硬件技术、移动通信技术和互联网技术的迅猛发展使得移动应用得到迅速普及和快速发展。截至2017年底,每个智能手机用户的平均APP数量达到40个以上,平均每天花费在各类APP上的...

    互联网公司如何正确的做技术选型.pptx

    互联网公司如何正确的做技术选型.pptx

    Java 常用技术选型.docx

    Java技术选型是软件开发中的关键决策,它直接影响项目的稳定性和效率。在Java领域,有众多优秀的框架和技术可供选择,本篇文章将详细讨论一些常用的技术选型及其应用场景。 首先,后端服务框架方面,Dubbo是一款高...

    技术选型方案(开发语言选型)针对java.doc

    在软件开发过程中,技术选型是一项至关重要的决策,它直接影响项目的效率、可维护性和扩展性。本文将深入探讨为何选择Java作为开发语言,并分析其在技术选型中的优势。 Java是一种广泛使用的高级编程语言,由Sun ...

    张辉清-小团队构建大网站之技术选型.pdf

    在构建大型网站的过程中,技术选型对于小团队来说至关重要,因为它直接影响着项目的成功与否和团队的发展潜力。张辉清在《小团队构建大网站之技术选型》中深入探讨了如何进行有效且适应性强的技术选型,以支持团队在...

    前端技术选型分析文档

    随着互联网技术的快速发展,前端开发技术也在不断地进步和迭代。在众多前端框架和技术中,jQuery、Vue、React 和 Angular 成为了当前最为流行的几个选项。本文将针对这些前端技术进行深入分析,包括它们的发展趋势、...

    深度学习技术选型白皮书.pdf

    深度学习技术选型白皮书(2018年)由Delphi标签标注,是中国人工智能产业发展联盟的研究成果,于2018年10月发布。白皮书的目的是为企业在应用深度学习技术时提供技术选型参考,并为开源框架及产品的选型评测提供依据...

    技术选型方案(中间件选型)针对Nginx.doc

    **技术选型方案:Nginx 中间件详解** 在当今的互联网环境中,选择合适的中间件对于构建高效、稳定、可扩展的系统至关重要。Nginx作为一款高性能的Web服务器和反向代理服务器,因其出色的性能特性而备受青睐。本文将...

    大型互联网架构设计实例分析.pdf

    首先,互联网软件系统与传统企业应用软件的主要区别在于其对弹性和扩展性的要求。互联网产品往往需要在短时间内应对巨大的用户量增长,这就要求架构设计能够支持快速扩展和灵活调整,比如在"给飞行中的飞机换引擎",...

    技术选型-技术委员会必要的思考-沈剑.pdf

    技术委员会在互联网行业中扮演着至关重要的角色,它是推动技术进步和组织内部技术人才发展的重要机构。...有效的职级评审制度有助于激励员工成长,而技术委员会的决策和行动则直接影响着公司技术实力的提升和长远发展。

    深度学习技术选型白皮书(2018 年)

    深度学习技术选型白皮书(2018年)是针对当时深度学习领域的一份重要参考资料,旨在为开发者、研究人员以及企业决策者提供全面的深度学习技术对比和选择建议。这份白皮书可能涵盖了以下几个关键知识点: 1. **深度...

    10-技术选型.md

    4. 技术的价值与成本权衡:对于大型系统,使用TypeScript可能有助于减少bug,提高代码质量,尽管需要付出学习和维护成本。但对于小型系统,TypeScript的提升作用可能就不那么明显,成本可能高于其带来的价值,因此在...

    数据中台技术选型最佳实践.pdf

    总结来说,数据中台技术选型最佳实践强调了大数据技术的演进趋势,数据中台在组织架构、技术组件和服务模式上的优化,以及在实际业务中的广泛应用。企业应根据自身需求,结合这些最佳实践,选择合适的技术路线,构建...

    开源技术选型手册pdf

    近 10 年过去了,开源软件已成为软件行业,特别是互联网行业最重要和发展最快的领域,著名 开源项目网站 SourceForge 在 1999 年还只有数百个开源项目,到 2008 年初,其开源项目数已经超 过 17万个,几乎覆盖软件...

    技术方案和设备选型.docx

    1. **技术决策难**:建设单位往往缺乏必要的技术力量,在技术方案和设备选型方面难以做出决策。 2. **市场选择困难**:市场上信息技术产品的种类繁多,价格差异大,建设单位难以判断优劣,容易陷入被动局面。 3. **...

Global site tag (gtag.js) - Google Analytics