浅论Hadoop应用工作思路

随着企业对大数据越来越重视，hadoop应用达到了前所未有的高度。今天聊聊hadoop应用的工作思路，我想了下以下几方面，和大家一起讨论：

 

首先最重要的是建立一支以开发人员为主的团队。

Hadoop虽然很火，但是还是在初级阶段，开源的东西存在业务不完全匹配，成熟度低等诸多问题。所以不管是什么公司，什么部门，应该建设一支以开发人员为主的团队。立足于能读懂开源代码，能修改bug，可以根据自己的场景进行适度匹配。

团队建立之后，以团队技能成熟度模型为指导，牵引团队技能逐渐成熟，达到事成人爽。关于团队成熟度，以前写过一篇博文《开源软件使用3个level》。

活都是人干出来的，好的团队，事情能干成，差的团队也能把事情干砸，所以各个公司的老板，经理再打算部署hadoop时，先应该把团队建设放首位。

 

第二，确立工作总体思路。基于自己公司的当前现状，业务的需求，每个阶段都应该确立工作的指导思路。是自立更生为主，还是应用为主。指导思路确定，工作工作才能有条不紊的开展。不同阶段的，思路应该是不一样，不要抱残守缺。IT行业变化很快，工作思路也应该根据客观条件的变化积极转变。

 

第三，重视知识管理。Hadoop技术发展很快，各种开源软件日新月异，知识爆炸很厉害。所以追踪开源发展，各种技术的学习天天有。整个团队要重视知识管理，知识技能可以得到继承。团队成员的流失和新加入，应该不会明显影响整个团队成熟度。

 

第四，创建自己的bendchmark。每种业务对应不同的场景，所以hadoop应用团队开展工作的第一件事情，就是建立适合自己业务的bendchmark。最好的不一定好，合适的才是最好。

 

第五，选型应该坚持one fit a branch。没有一个包打天下的组件和解决方案。各种组件应该组合思路，各取所长。