`
wocclyl
  • 浏览: 7872 次
  • 性别: Icon_minigender_1
  • 来自: 北京
最近访客 更多访客>>
社区版块
存档分类
最新评论

Pig的安装和配置

    博客分类:
  • pig
 
阅读更多

一、pig 的安装条件

   1、hadoop 的安装

   2、Java 1.6 的安装

 

二、pig 的下载 安装 配置

    1、pig 的下载  http://pig.apache.org/  下载相应版本的pig 文件

     2、解压安装

     3、配置

      配置环境变量 vi /etc/profile  在后面PATH参数位置增加pig的安装目录路径

     export PATH=$JAVA_HOME/bin:$PATH:/home/hadoop/pig-0.7.0/bin:$PATH

     source /etc/profile 使配置生效

     执行 pig -help 验证安装是否成功

 

三、pig 运行模式

     1、LOCAL模式 

      pig -x local

      2、MapReduce模式

      pig -x mapreduce 

     

分享到:
评论

相关推荐

    大数据技术基础实验报告-pig的安装配置与应用.doc

    【大数据技术基础实验报告——Pig的安装配置与...通过这个实验,我们不仅了解了Pig的基本操作,还掌握了如何在Hadoop环境中配置和运行Pig作业。这为理解和应用其他大数据处理工具,如Hive、Spark SQL等,奠定了基础。

    pig的mapreduce模式的安装及配置.docx

    **Pig MapReduce模式的安装与配置** Apache Pig 是一个用于大数据分析的平台,它提供了一种高级语言,称为Pig Latin,使得用户能够编写处理大量数据的复杂脚本,而无需关注底层的MapReduce实现。在Hadoop生态系统中...

    pig-0.9.1.tar

    本文将详细介绍如何在Hadoop环境下安装和配置Pig-0.9.1。 一、Pig-0.9.1简介 Pig的设计目标是简化大数据处理任务,通过其自定义的Pig Latin语言,用户可以编写简单的数据流转换,而无需深入理解MapReduce的工作原理...

    完整版大数据云计算课程 Hadoop数据分析平台系列课程 Hadoop 08 Pig安装与Pig Latin语言,应用案例 共2

    安装过程包括获取Pig的源码或者二进制包,配置Hadoop环境,将Pig添加到Hadoop的类路径中,以及启动Pig的交互式shell(Pig grunt shell)。了解这些基础步骤是使用Pig的前提,也是日后维护和调试Pig脚本的关键。 ...

    pig-0.17.0.tar的安装包,

    《Apache Pig 0.17.0 安装与配置指南》 ...正确安装并配置Pig,结合Pig Latin的使用,可以极大地提高数据处理的效率和便捷性。通过不断的实践和学习,你将能更好地掌握Pig的潜力,为大数据分析带来强大的动力。

    pig-0.15.0

    在压缩包子文件的文件名称列表中,唯一的条目“pig-0.15.0”可能是解压后的目录名,这将包含所有与 Pig-0.15.0 相关的文件和子目录,如bin、lib、docs等,这些内容涵盖了运行、配置和理解 Pig 的所有必要组件。...

    pig-0.9.2.tar.gz

    如果需要,也可以使用`make`和`make install`来编译和安装Pig到系统路径。 4. **设置环境变量**:为了使Pig在命令行中可用,可能需要将它的bin目录添加到PATH环境变量中,例如,添加`export PATH=$PATH:/path/to/...

    pig-0.9.2.tar.gz下载

    下载并解压"Pig-0.9.2.tar.gz"后,开发者可以在本地或Hadoop集群上安装和运行Pig。这通常包括配置环境变量,设置Hadoop路径,然后通过Pig命令行或者脚本执行Pig Latin脚本。 5. **Pig的应用场景**: - 数据清洗:...

    pig编程指南源码

    源码中可能包含了如何在Hadoop集群上运行Pig脚本的示例,以及如何配置Pig与Hadoop的交互,如设置HDFS路径、处理错误和监控性能。 七、Pig与大数据生态系统 Pig不仅可以与其他Hadoop组件如HBase、Hive和Spark集成,...

    hive如何去安装与配置

    在本文中,我们将详细讲解Hive的安装与配置过程,帮助你更好地理解和操作这个强大的大数据处理工具。 ### 一、系统需求与环境准备 在开始安装Hive之前,确保你的系统满足以下要求: 1. **Java运行环境**:Hive依赖...

    Pig数据处理工具在Ubuntu系统下的Hadoop环境中安装配置

    内容概要:本文提供了一份详尽的指南用于帮助读者完成Pig数据处理工具在64位Ubuntu系统上针对已部署好的Hadoop集群环境下实施从头开始的手动安装以及环境变量设定的具体步骤。 适用人群:旨在帮助有一定Hadoop基础的...

    完整版大数据云计算课程 Hadoop数据分析平台系列课程 Hadoop 08 Pig安装与Latin语言 共26页.pptx

    课程的重点在于让学员能够独立且熟练地完成Hadoop的安装、配置和管理,包括在Hadoop、操作系统和关系型数据库之间有效地传输数据。此外,课程还要求学员掌握Map-Reduce原理,能够编写Map-Reduce程序,理解HDFS...

    Programming Pig(pig编程).pdf

    对于想要开始使用Pig的读者,书中的内容会从下载Pig包开始讲起,包括从Apache、Cloudera、Maven仓库等不同途径获取Pig的方法,以及安装和运行Pig的基本步骤。这本书还可能涉及如何设置和配置Pig环境、使用Pig Latin...

    mysql的安装与配置.docx

    ### MySQL的安装与配置 #### 一、MySQL的安装 MySQL是一种广泛使用的开源关系型数据库管理系统,因其稳定性和性能而受到开发者的喜爱。在Linux环境下安装MySQL可以通过多种方式实现,如使用RPM包安装等。 - **...

    Oozie的安装与配置.docx

    【Oozie的安装与配置】是Hadoop生态系统中的一个重要环节,Oozie是一个工作流调度系统,用于管理和协调Hadoop...Oozie的配置和使用对于Hadoop集群的自动化管理至关重要,能够有效提升大数据处理的效率和流程化程度。

    pig-0.12.1.tar.gz

    在实际使用中,用户首先需要在Linux服务器上安装Hadoop环境,然后解压并配置Pig 0.12.1,使其能够与Hadoop集群通信。接着,可以使用Pig命令行或交互式Shell(如Grunt)编写和执行Pig Latin脚本,进行数据处理任务。...

    HADOOP 系统之hadoop pig hive 整合版

    **Hadoop The Definitive Guide** 这本书是Hadoop领域的权威指南,涵盖了Hadoop的安装、配置、优化以及各种实用技巧。通过阅读这本书,你可以深入了解Hadoop的内部工作机制,如何管理Hadoop集群,以及如何编写...

    《pig编程指南》英文非图片电子版 Programming.Pig.pdf

    ### 知识点四:Pig的安装与配置 为了使用Pig,用户需要在计算机上安装Pig包。根据提供的部分内容,Pig可以通过多种途径下载安装。例如,可以从Apache官方网站获取,或者通过Cloudera的发行版本来安装,亦或是通过...

    pig-0.12.0-cdh5.5.0.tar.gz

    这个压缩包包含了 Pig 的源代码、库文件、配置文件以及必要的文档,是开发者和数据分析师在 CDH 平台上进行数据处理的必备工具。 1. **Pig Latin 语言**:Pig Latin 是 Pig 的核心,它是一种声明式语言,用户可以...

Global site tag (gtag.js) - Google Analytics