博客首页 → 分布式计算

最新文章列表

操作分布式文件之七：如何并行读写远程文件

FttpAdapter是通过FttpReadAdapter的tryReadAll方法进行并行读FttpAdapter fa = new FttpAdapter("fttp://10.232.20.151/home/log/1.log");Result<byte[]> rs = fa.getFttpReader().tryRe ...
云计算hadoop分布式文件系统分布式存储分布式计算 
fourinone 评论(0) 有2208人浏览 2012-05-30 13:37

操作分布式文件之六：如何解析远程文件

假设通过FttpAdapter已经读取到远程文件中一部分数据，如下：FttpAdapter fa = new FttpAdapter("fttp://10.232.20.151/home/log/1.log");FttpReadAdapter reader = fa.getFttpReader();byte[] bts = reader.readAll(); 上面得到一个byt ...
云计算hadoop分布式文件系统分布式存储分布式计算 
fourinone 评论(0) 有1646人浏览 2012-05-30 11:55

操作分布式文件之五：如何读写远程文件

FttpAdapter是通过FttpReadAdapter来直接读取远程文件内容 FttpAdapter fa = new FttpAdapter("fttp://10.232.20.151/home/log/1.log");FttpReadAdapter reader = fa.getFttpReader();byte[] bts = reader.readAll(); 上 ...
云计算hadoop分布式文件系统分布式存储分布式计算 
fourinone 评论(0) 有2210人浏览 2012-05-29 15:02

操作分布式文件之四：如何进行集群内文件复制和并行复制

集群文件复制是经常面临的需求，比如备份容灾，文件迁移，同步数据等等 FttpAdapter提供了简单高效的文件复制方法，支持远程文件的集群内复制FttpAdapter fromfile = new FttpAdapter("fttp://10.232.20.151/home/log/a.log");FttpAdapter tofile = fromfile.copyTo(&q ...
云计算hadoop分布式文件系统分布式存储分布式计算 
fourinone 评论(0) 有2911人浏览 2012-05-29 14:56

操作分布式文件之三：如何访问和操作远程文件

FttpAdapter fa = new FttpAdapter("fttp://10.232.20.151/home/qianfeng.py/fttp/tmp/1.log");上面实例化一个FttpAdapter类，并输入一个fttp路径，可以是一个目录路径，也可以是个文件路径 FttpAdapter类提供了一系列访问远程文件的方法：createDirectory和creat ...
云计算hadoop分布式文件系统分布式存储分布式计算 
fourinone 评论(0) 有2462人浏览 2012-05-29 14:49

操作分布式文件之二：如何访问集群文件根目录

启动成功FttpServer后，可以使用FttpAdapter的api进行相关操作： FttpAdapter.fttpRoots()是一个静态方法，可以得到集群文件系统根目录，它返回一个String数组，通常是ip字符对应每台计算机。 listRoots（）方法可以得到每台计算机上的硬盘目录，比如： FttpAdapter fa = new FttpAdapter("fttp://&q ...
云计算hadoop分布式文件系统分布式存储分布式计算 
fourinone 评论(0) 有2113人浏览 2012-05-29 14:43

操作分布式文件之一：如何搭建配置FttpAdapter环境

FttpAdapter的使用很简单，在每台计算机上启动一个FttpServer即可，另外需要启动一个ParkServer负责协同。ParkServer也可以和其中一个FttpServer放在相同计算机上 1、启动ParkServerDemo（它的IP端口已经在配置文件的PARK部分的SERVERS指定） 2、每台计算机启动FttpServer,需要指定该计算机的ip为输入参数 启动好后，然后打开 ...
云计算hadoop分布式文件系统分布式存储分布式计算 
fourinone 评论(4) 有3728人浏览 2012-05-29 14:40

Fourinone架构原理ppt

Fourinone提供了一个4合1分布式框架和简单易用的编程api，实现对多台计算机cpu，内存，硬盘的统一利用，从而获取到强大计算能力去解决复杂问题。Fourinone框架提供了一系列并行计算模式（农民工/包工头/职介绍/手工仓库）用于利用多机多核cpu的计算能力；提供完整的分布式缓存和小型缓存用于利用多机内存能力；提供像操作本地文件一样操作远程文件（访问，并行读写，拆分，排它，复制，解析，事务等 ...
分布式计算并行计算hadoopzookeeper云计算 
fourinone 评论(5) 有8211人浏览 2012-04-27 10:11

淘宝Fourinone分布式计算框架性能、压力、容灾测试报告

Fourinone在去年11月在淘宝内部通过了压测，上亿排序和wordcount等经典指标均优于hadoop，这是一份长达10多页的详细测试报告(附件)
云计算并行计算分布式计算hadoopzookeeper 
fourinone 评论(4) 有5197人浏览 2012-02-27 14:18

分布式计算的名博推荐v0.1

1.Werner Vogels      Amazon CTO               All Things Distributed亚马逊的CTO，此博客从名字 All Things Distributed就可以看出来主要是关于分布式计算方面的文字。亚马逊不仅是最大的在线零售商，而且也是最大的云计算服务提供商（云计算方面貌似比google起步早，比google用户多）。此博客记录的主要就是ama ...
分布式计算云计算 
loveczp 评论(0) 有994人浏览 2011-08-19 21:17

最近博客热门TAG

Java(141741) C(73643) C++(68602) SQL(64557) C#(59604) XML(59131) HTML(59042) JavaScript(54916) .net(54782) Web(54511) 工作(54116) Linux(50906) Oracle(49861) 应用服务器(43285) Spring(40811) 编程(39452) Windows(39380) JSP(37540) MySQL(37266) 数据结构(36420)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics