keren
- 浏览: 1580444 次
- 性别:
- 来自: 北京
-
文章分类
- 全部博客 (571)
- Flex (301)
- AIR (5)
- ComPiere (8)
- ExtJS (15)
- SAP (0)
- jBPM (3)
- Java-Hibernate (5)
- Java-Spring (10)
- XML (2)
- java-web (30)
- db2 (2)
- websphere (4)
- Google (5)
- 虚拟机 (10)
- eclipse (8)
- Win2003 (11)
- Ubuntu (27)
- VMware (4)
- CentOS (3)
- JSON (1)
- Oracle (15)
- SilverLight (1)
- 大事记 (6)
- VirtualBox (5)
- Solaris (10)
- AIX (6)
- 云计算 (10)
- MacOS (4)
- iOS (1)
- SQLite (1)
- Activiti (1)
- jdk (5)
- hadoop (8)
- Ant (4)
- PhoneGap (2)
- JavaScript (11)
- jQuery (1)
- FireFox (1)
- HBase (2)
- sqoop (0)
- ffmpeg (7)
- mencode (0)
- jdbc (1)
- SQLServer (1)
- 组件平台 (12)
- struts2 (4)
- intellj (4)
- android (1)
- ExtJS4 (1)
- 色卡司 (1)
- Linux (3)
- ExtJS5 (1)
- zookeeper (2)
- maven (1)
- Java (6)
- vpn (0)
- squid (1)
- MySQL (2)
- webpackage (1)
- antd (1)
- lucene (1)
最新评论
-
qq_24800465：
请问这里的库从哪下载啊
ffmpeg所有的编码器（encoders） -
neusoft_jerry：
貌似这里没用到StreamingAMFChannel哦，只是用 ...
Flex BlazeDS 推送技术 -
anyone：
感谢你的博文，看了受益匪浅
记住这个IntelliJ IDEA的编译设置 -
keren：
现在还有什么应用需要用flex来开发的？
flex tree的展开，关闭，添加、删除子节点 -
neusoft_jerry：
简洁明快，好贴好贴！楼主V5!
flex tree的展开，关闭，添加、删除子节点
环境：
win7+eclipse+ ubuntu+hadoop
开始运行时报没有权限，只要把 hdfs的权限加大：
接着运行MR报 内存一出：
运行时加入参数：因为 mapred.child.java.opts默认大小是200m,具体的配置位置在 mapred-site.xml.
hadoop1.0
win7+eclipse+ ubuntu+hadoop
开始运行时报没有权限，只要把 hdfs的权限加大：
hadoop dfs -chmod -R 777 /usr/local/hadoop/hadoop-dir/hadoop-dev/tmp/
接着运行MR报 内存一出：
运行时加入参数：因为 mapred.child.java.opts默认大小是200m,具体的配置位置在 mapred-site.xml.
-Dmapred.child.java.opts=-Xmx512m
- 大小: 50.2 KB
分享到：
评论
3 楼
niko7
2012-08-17
我在虚拟机里装了Ubuntu11，分配了2G内存。
里面装了hadoop1.0.3，安装都顺利，但是运行例子的时候总是报内存溢出。
请问下，你给hadoop的机器开了多少内存？或者，根据我的情况，hadoop的设置要怎么调整？
谢谢！
里面装了hadoop1.0.3，安装都顺利，但是运行例子的时候总是报内存溢出。
请问下，你给hadoop的机器开了多少内存？或者，根据我的情况，hadoop的设置要怎么调整？
谢谢！
2 楼
keren
2012-08-16
niko7 写道
你这是hadoop的哪个版本啊？
hadoop1.0
1 楼
niko7
2012-08-15
你这是hadoop的哪个版本啊？
发表评论
-
linux top命令使用简要
2019-03-08 08:42 487平时linux top使用的最多，这里简单记一下 PID ... -
ubuntu手动设置dns解析
2017-05-04 11:27 2627/etc/resolv.conf中设置dns之后每次重启Ubu ... -
linux shell IF判断时报not found错误解决方法
2016-07-06 09:43 1266原来if判断那块有个坑，if空格[空格$? -eq 0空格]; ... -
ubuntu14.04 vpn server安装部署
2015-10-09 14:10 255云主机：ucloud Ubuntu搭建VPN服务器pptpd安 ... -
ubuntu14.04 vpn client 拨号设置(通过终端命令来实现)
2015-10-09 13:58 268#首先安装PPTP-VPN拨号客户端 sudo apt- ... -
ubuntu14.04 vpn连接设置
2015-09-29 11:01 148ubuntu 14.04vpn连接设置，要选择 有状态的 点对 ... -
Ubuntu DNS解析不了，上不了网
2015-09-07 23:03 1022dns设置 要加入 本地的网关ip，否则还是解析不了域名，上不 ... -
ubuntu 下安装virtualbox虚拟机
2015-08-24 15:59 1003#ubuntu virtualbox install sud ... -
两步搞定chrome在ubuntu下的安装
2015-08-24 15:45 1508下载 安装包：google-chrome-stable_cur ... -
Ubuntu 10.10更新源的问题
2014-06-18 17:54 1159老版本的ubtutu更新源的问题， 执行更新时遇到 忽略 或 ... -
64位ubuntu下安装32位jdk注意事项
2013-02-21 10:58 1965【64位ubuntu下安装32位jdk注意事项】 使用tar包 ... -
删除hdfs文件报 permission denied的处理
2012-08-02 17:11 4102删除hdfs文件报 permission denied的处理, ... -
HBase启动不了的一个原因处理
2012-07-31 08:53 16554几天没有启动hbase，今天重新启动，却发现 HRegionS ... -
Ubuntu 定时备份oracle数据库实现
2012-07-30 15:12 1565最近开发需要在ubuntu里面定时备份oracle数据库的需要 ... -
Oracle10g在Ubuntu10.10(64位)系统里面的安装
2012-05-15 09:43 1321安装软件下载地址 http://www.oracle.com/ ... -
Ubuntu 执行apt-get install时，必须先配置dns.
2012-05-14 17:05 11642更新时的注意事项: 错误 http://cn.archiv ... -
Ubuntu所有版本下载地址
2012-05-11 19:33 1345想下载以前的版本，找半天，现在记下来 http://mirro ... -
Hadoop1.0.0 eclipse 插件编译包
2012-04-23 00:51 3577hadoop1.0.0没有eclipse 插件包，今晚自己编译 ... -
Virtualbox里面安装MacOS
2012-04-15 07:56 1884机器环境: ibm thinkpad t410 window ... -
Hadoop必须知道的几个问题
2012-04-12 09:02 11101,master slaves文件只有 namenode se ...
相关推荐
在Windows 7操作系统中，使用Eclipse开发Hadoop应用程序的过程涉及多个步骤，涵盖了从环境配置到实际编程的各个层面。以下是对这个主题的详细讲解： 首先，我们需要了解Hadoop和Eclipse的基础。Hadoop是一个开源的...
从标题“hadoop mr程序0.20之后版本所需jar包”可以看出，这里关注的是Hadoop MapReduce在0.20版本之后的版本，特别是与运行MR（MapReduce）程序相关的JAR包。描述进一步强调了这些JAR包是针对执行MR任务所必需的。...
### Win 7 64位系统上编译Hadoop 2.7.3源码的知识点 #### 一、背景介绍 在当前大数据处理技术快速发展的背景下，Hadoop作为主流的大数据处理框架之一，被广泛应用于各类场景之中。对于开发者来说，能够熟练地在自己...
在Windows 7环境下编译并运行Hadoop可能需要一些特别的步骤，因为Hadoop最初是为Linux设计的。这个“win7下编译过的hadoop-2.7.2.zip”文件是为了适应Windows操作系统，使用户能在本地环境中学习和测试Hadoop功能。 ...
《Hadoop集群程序设计与开发教材最终代码》这个压缩包文件是针对学习和理解Hadoop分布式计算框架的重要教学资源。Hadoop是Apache软件基金会开发的一个开源项目，它为大规模数据处理提供了一种分布式、容错性强的解决...
7. **远程调试Hadoop程序**： - 在开发环境中创建一个Hadoop项目，编写并编译源代码。 - 将编译后的JAR文件上传到HDFS，然后使用`hadoop jar`命令提交作业。 - 使用IDE（如Eclipse或IntelliJ IDEA）的远程调试...
标题中提到的关键是"win7下eclipse配置hadoop的插件"，这意味着我们要在Windows 7操作系统上，利用Eclipse进行Hadoop开发的环境配置。这通常包括以下几个步骤： 1. **下载Hadoop插件**：这里提到的`hadoop-eclipse-...
### Win7 下 Cygwin 搭建 Hadoop 开发环境 #### 一、概述 在 Windows 7 系统中使用 Cygwin 搭建 Hadoop 开发环境是一项较为复杂的任务，需要对 Windows 系统环境变量、Cygwin 的安装与配置以及 Hadoop 安装包进行...
总结起来，"win下maven创建的hadoop程序demo"是一个涵盖了Windows开发环境、Maven项目管理、Hadoop分布式计算平台以及MapReduce编程模型的实践案例。这个案例旨在帮助开发者了解和掌握在Windows上使用Maven构建...
总之，这个“win7下编译过的hadoop2.7.2”文件对于在Windows 7环境下快速部署和使用Hadoop非常有帮助，它省去了编译的复杂性，让开发者和数据分析师能够专注于Hadoop的应用和数据分析，而不是底层的系统配置。...
总之，这个win7编译过的Hadoop 2.6.1版本是为在Windows 7环境下运行Hadoop设计的，包含了运行和管理Hadoop集群所需的关键组件，使得开发者和数据工程师可以在Windows平台上利用Hadoop的强大功能进行大数据处理和分析...
本篇将详细讲解如何在Linux和Windows操作系统下配置Eclipse进行Hadoop开发。 **一、Linux环境下配置Eclipse开发Hadoop** 1. **安装Java**: Hadoop依赖Java运行环境，首先确保系统已安装Java，并且版本至少为Java 8...
在开发Hadoop应用程序时，Eclipse作为Java IDE是开发者常用的选择。为了在Eclipse中运行Hadoop 2.7.3程序，你需要确保正确配置了项目依赖并包含了所有必需的JAR包。以下是你需要知道的关键知识点： 1. **Hadoop环境...
在win10下编译Hadoop 2.7.2，首先需要安装Java开发工具包（JDK），因为Hadoop是用Java编写的。然后，下载Hadoop源码，使用Apache Maven或Gradle等构建工具进行编译。编译过程中可能需要配置环境变量，如HADOOP_HOME...
需要注意的是，在集群分布模式下，已经在单机或伪分布模式下编写并调试完成的程序，在不进行修改的情况下，可以运行在真实的分布式Hadoop集群中，尽管通常需要修改配置。 3. Hadoop集群远程作业提交与执行 在集群...
《Hadoop集群程序设计与开发》是一份详细的教学资料，主要涵盖了大数据处理领域中的核心工具——Hadoop的集群程序设计与开发技术。这份PPT旨在帮助开发者深入理解Hadoop生态系统，掌握分布式计算的基本原理和实践...
关于【压缩包子文件的文件名称列表】，虽然多数文件看起来像是图片或视频资源，但有两个文件值得注意："windows7-64bit平台本地编译好的hadoop.rar" 和 "win10bin.rar"。这些RAR文件很可能是编译后的Hadoop bin目录...
在Windows环境下开发Hadoop 2.4.1程序时，可能会遇到与本地库文件相关的兼容性和依赖性问题。Hadoop最初是为Linux环境设计的，因此在Windows上运行Hadoop时，需要对某些库文件进行调整以确保正常运行。本文将深入...
win7下编译过的hadoop jar包 hadoop1.1.2 hadoop0.20以后的版本的安装目录下contrib/没有eclipse的hadoop-*-eclipse-plugin.jar插件，需要自己用ant编译。
8. **注意事项**：在Windows上运行Hadoop可能会遇到性能问题，因为Hadoop的设计初衷是优化大规模的Linux集群。此外，Windows的权限管理和文件系统结构与Linux不同，可能会引入一些兼容性和稳定性问题。 总结来说，...