farness
- 浏览: 4577 次
- 性别:
- 来自: 上海
-
最新评论
文章列表
下面的内容直接翻译自http://spark.apache.org/docs/latest/cluster-overview.html
会有少量自己的扩展补充，当然理解或翻译上的问题，有错请指正，下面正式开始。
本文简单介绍了Spark是如何在集群上运行的，这能让我们更好的理解涉及的各个模块。想了解应用是如何在cluster上启动的同学可以研读http://spark.apache.org/docs/latest/submitting-applications.html
组件介绍
Spark 应用运行时就像在集群上相互独立运行一组程序，它们之间通过主程序（称为驱动程序）的Spar ...
Spark Overview
- 博客分类：
- Spark
下面的内容直接翻译自http://spark.apache.org/docs/latest/index.html
会有少量自己的扩展补充，当然理解或翻译上的问题，有错请指正，下面正式开始。
Spark Overview
Apache Spark是一个快速通用的集群计算系统。它提供了对Java、Scala、Python ...
今天又接到一个零碎的事，要搭建代理服务，让在现场工程师也能连接到公司的一些资源；正常来说这个弄个VPN就ok了，但不知道为什么没这么做，只是在防火墙上做了个端口映射（只有一个端口），防火墙的控制不再手里，申请起来还很麻烦，只好在这个端口上想办法了
以前做web服务反向代理的时候，用的nginx，挺方便的，第一个就想到了它
网络结构如下图
可以看到有3台机器要对外服务，分别是项目管理（http)，SVN（https），TFS(windows http）
前2个配置都很简单，如下
location /project {
proxy_pass http://192.168. ...
birt和web项目整合
- 博客分类：
- 前端
需求提出用户可一定程度配置的报表，我一个人开能力有限，选择了BIRT，试了下还比较好用，先做个demo，先解决birt和项目整合的问题：
和web项目整合最简单的莫过于，把项目里的url直接指向到birt项目的报表文件；但是这样做的话有2个问题：1.这些报表的访问权限没法控制，用户可以直接访问birt项目的url；2.报表的数据源都配置在报表里，而且birt里登录的密码是base64加密的，一旦环境有变化，改起来很麻烦
一、BIRT与工程的集成。
下面内容主要复制于http://www.birthome.cn/forum.php?mod=viewthread&tid=8606& ...
有一年多不怎么写代码，很多东西都生疏了
换了个公司，本来是冲着做数据库的，这块本来也比较熟了；计划赶不上变化，项目需要用java，边上大票C#的主，就我还算用过java，这个重担就非我莫属了
好早不是很赶，乘此机会，把前端的(jQuery)，java底层的(多线程、网络通信)，框架(Spring mvc,Spring boot)的，都捡回来；还有andriod，hadoop两套之前都只是草草看了下，有时间也要好好弄弄
目标很宏大，一步步来