`

Oozie: Using Mysql to store oozie metadata

 
阅读更多

1. configure oozie-site.xml

 

    <property>
        <name>oozie.db.schema.name</name>
        <value>oozie</value>  
    </property>

    <property>
        <name>oozie.service.JPAService.create.db.schema</name>
        <value>true</value>
    </property>

    <property>
        <name>oozie.service.JPAService.jdbc.driver</name>
        <value>com.mysql.jdbc.Driver</value>
    </property>

    <property>
        <name>oozie.service.JPAService.jdbc.url</name>
        <value>jdbc:mysql://192.168.122.1:3306/${oozie.db.schema.name}</value>
     </property>
    <property>
        <name>oozie.service.JPAService.jdbc.username</name>
        <value>zhaohj</value>   
    </property>

    <property>
        <name>oozie.service.JPAService.jdbc.password</name>
        <value>password</value>  
    </property>

2. create oozie database in mysql and grant privileges to user 'zhaohj'

 

3.copy mysql jdbc driver to   oozie-4.0.1/libext/

4.

#oozie-setup.sh prepare-war

#ooziedb.sh create -sqlfile oozie.sql -run   //produce oozie.sql and create all tables in oozie database

 

 

 

 

 

分享到:
评论

相关推荐

    oozie配置mysql:表结构详解

    oozie配置mysql所需表结构。Apache Oozie是用于Hadoop平台的一种工作流调度引擎。

    OOZIE 配置和调度流程(1).doc

    * OOZIE 调度文件:oozie_run 文件夹下的文件包括 coordinator.xml、workflow.xml、job_h.properties、job_test.properties、run.sh、test.sh、rbis-spark_2.10-1.0.jar、mysql-connector-java.jar 和 commons-pool2...

    oozie 入门

    oozie 入门 oozie概述:oozie能干什么 oozie格式:怎么用oozie oozie执行:怎么运行oozie

    MySQL :oozie建表sql

    Hadoop oozie启动或运行报错:Table ‘oozie.VALIDATE_CONN’ doesn’t exist 解决方案:oozie建表sql,直接下载,执行即可。

    oozie:Apache Oozie的镜子

    阿帕奇·奥兹(Apache Oozie)什么是Oozie Oozie是一个可扩展,可扩展且可靠的系统,用于通过Web服务定义,管理,调度和执行复杂的Hadoop工作负载。 更具体地说,这包括: 基于XML的声明性框架,用于指定作业或相关...

    oozie使用整理

    &lt;workflow-app name="foo-wf" xmlns="uri:oozie:workflow:0.1"&gt; &lt;start to="firstHadoopJob"/&gt; ``` 2. **End 控制节点**:表示工作流的成功结束。当工作流中的一个任务到达 end 节点时,其他正在执行的任务会...

    hadoop-oozie:具有Oozie的映像,该映像是为Hadoop 2.x构建的(带有2.7.0库)

    适用于Hadoop 2.x的Oozie 这是一个映像,该映像对oozie / webapp的uber配置文件进行了一些更改,并使用hadoop-2配置文件和Hadoop 2.7.0库构建了一个Oozie发行版。 用法 将Oozie sharelib安装到HDFS docker run -ti...

    oozie mysql数据库表

    oozie mysql数据库表结构。文档里是oozie mysql的建表语句

    Oozie调度SparkSQL样例代码_oozie_hive_

    &lt;workflow-app name="spark-sql-workflow" xmlns="uri:oozie:workflow:0.5"&gt; &lt;start to="spark-action" /&gt; &lt;spark xmlns="uri:oozie:spark-action:0.2"&gt; ${jobTracker} ${nameNode} &lt;name&gt;spark.master...

    oozie-4.3.1.tar.gz

    4. 构建Oozie:`mvn clean install -DskipTests` 5. 创建数据库:根据Oozie的数据库要求(如MySQL)创建数据库和用户。 6. 初始化数据库:`bin/ooziedb.sh create -sqlfile db/create Derby.sql`(对于Derby数据库)...

    oozie oozie

    对于MySQL,可以使用`mysql -u [username] -p [database_name] &lt; oozie.sql`命令;对于其他数据库,命令可能会有所不同。 4. **验证安装**:成功执行SQL脚本后,应该能够在数据库中看到`oozie.VALIDATE_CONN`表以及...

    Oozie的安装与配置.docx

    grant all on oozie.* TO 'oozieowner'@'localhost' identified by 'password';`。 7. **修改配置文件**: - 更新`conf/oozie-site.xml`,设置JDBC连接参数,包括驱动、URL、用户名和密码,以及Hadoop配置路径。 ...

    oozie最简单的安装说明+ExtJS-2.2包【亲测100%成功】

    3. 配置Oozie:编辑`conf/oozie-site.xml`,设置Oozie服务器的相关属性,如Hadoop配置位置、数据库连接等。 4. 创建数据库:Oozie需要一个数据库来存储元数据,可以是MySQL、Derby等。根据你的选择,执行相应的SQL...

    hue平台oozie工作流操作sqoop,把mysql.pdf

    本文主要讲述在Hue平台使用Oozie工作流操作Sqoop工具将MySQL数据库的数据传输到HDFS中,并最终导入到Hive表中的经验。以下是详细知识点: 1. Hue平台和Oozie工作流简介: Hue是一种开源的用户界面,用于简化与...

    oozie-4.1.0.tar.gz

    **Oozie 4.1.0:大数据工作流管理工具** Oozie 是一个针对Apache Hadoop生态系统的开源工作流调度系统,用于管理和协调Hadoop集群中的各种作业和任务。在4.1.0版本中,Oozie提供了一个灵活、可扩展的框架,允许用户...

    Apache Oozie Essentials(PACKT,2015)

    As more and more organizations are discovering the use of big data ... You will be capable of using Oozie to handle large Hadoop workflows and even improve the availability of your Hadoop environment.

    Oozie安装部署及任务定义说明

    - 创建Oozie数据库(如MySQL或Derby),并配置Oozie服务器连接。 - 修改conf/oozie-site.xml,配置Hadoop相关参数,如HDFS和JobTracker地址。 - 修改conf/oozie-env.sh,设置JAVA_HOME和其他环境变量。 - 初始化...

    extjs 2.2(oozie需要的)

    在实际操作中,执行以下步骤可以确保 ExtJS 2.2 成功集成到 Oozie: 1. 下载并解压提供的 `ext-2.2.zip` 压缩包。 2. 将解压后的目录移动到 `/opt/cloudera/parcels/CDH/lib/oozie/libext`。如果使用 `unzip` 命令...

Global site tag (gtag.js) - Google Analytics