`

基于KETTLE的第一个项目:网优大数据中心

 
阅读更多
一个基于KETTLE 和postgresql 的项目


问题1:如果通过修改内存大小,改善KETTLE的运行:

    您好!
    Kettle设置虚拟机内存,解决Out of Memory的方法如下:
    1、打开 Pentah Kettle spoon.sh,  或者 spoon.bat(通过“编辑”状态);
    2、修改文件中以下参数:

REM ******************************************************************
REM ** Set java runtime options                                     **
REM ** Change 512m to higher values in case you run out of memory   **
REM ** or set the PENTAHO_DI_JAVA_OPTIONS environment variable      **
REM ******************************************************************
if "%PENTAHO_DI_JAVA_OPTIONS%"=="" set PENTAHO_DI_JAVA_OPTIONS="-Xmx512m" "-XX:MaxPermSize=256m"

-Xmx512m 就是设置虚拟内存512m,通过修改 -Xmx 参数,以实现Java heap space 内存大小的设置。例如: -Xmx1024m








  • 大小: 89.9 KB
分享到:
评论

相关推荐

    基于Java与Web技术的KettleWeb数据集成平台源码

    项目概述:KettleWeb数据集成平台是一款基于Java与Web技术的开源数据集成工具。此平台源码基于Kettle原生版本6.1.0.1开发,扩展了Web端操作功能,便于用户进行数据集成工作。 技术栈:项目主要采用Java语言进行开发...

    pentaho-Kettle安装及使用说明(例子).doc

    Kettle是一个开源的ETL项目,项目名来自于水壶的英文单词,意为把各种数据放到一个壶里,然后以一种你希望的格式流出。Kettle包括三大块:Spoon、Kitchen和Pan。 * Spoon是一个GUI方式的转换/工作设计工具,用于...

    pentaho-kettle-8.3

    总结一下,Pentaho Kettle 8.3 是一个强大而灵活的数据集成工具,它的特点包括易用的图形化界面、广泛的数据源支持、丰富的数据转换功能、高效的调度和监控。通过研究其源码,开发者可以深入了解 ETL 过程,提升数据...

    基于kettle实现的web版数据集成平台,致力于提供web可拖拽的数据集成平台。.zip

    数据采集是数据处理的第一步,它涉及从不同来源获取原始数据。在Kettle中,可以通过多种方式实现数据采集,如使用"表输入"步骤连接到数据库提取数据,或者使用"文件输入"步骤读取CSV、Excel、XML等文件。在Web版的...

    8.3.0.0-371 pentaho-kettle kettle-core

    8.3.0.0-371 pentaho-kettle kettle-core

    基于Kettle+Clickhouse+Superset构建亿级大数据实时数据分析平台视频教程

    基于Kettle+Clickhouse+Superset构建亿级大数据实时数据分析平台视频教程,该系统以热门的互联网电商实际业务应用场景为案例讲解,对电商数据的常见实战指标处理使用kettle等工具进行了详尽讲解,具体指标包括:流量...

    kettle-core.jar

    kettle开发不可缺少的工具,实现数据的抽取

    Kettle二次开发主要依赖的Jar包

    Kettle,全称为Pentaho Data Integration(PDI),是一款强大的数据集成工具,它提供了图形化的界面,使得数据转换和ETL(Extract, Transform, Load)过程变得简单易行。Kettle二次开发允许用户根据自身需求定制化...

    pentaho-kettle-master.zip

    ETL(Extract-Transform-Load的缩写,即数据抽取、转换、装载的过程, 我们经常会遇到各种数据的处理,转换,迁移,所以掌握一种 ETL 工具的使用必不可少。 Kettle 支持图形化的GUI设计界面,然后可以以工作流的...

    springboot整合kettle项目源码

    标题 "springboot整合kettle项目源码" 描述了一个基于Spring Boot框架的集成Kettle(Pentaho Data Integration,简称KDI)的工程实例。Kettle是一款强大的ETL(提取、转换、加载)工具,它允许开发者通过编写Java...

    kettle-core-8.1.0.0-365_kettle_kettle达梦8_

    Kettle,也被称为Pentaho Data Integration (PDI),是一款强大的数据集成工具,它提供了一种图形化的界面,让用户能够设计、执行和调度各种数据转换任务。在当前的信息化环境中,数据源多种多样,而达梦数据库作为...

    pentaho kettle-engine-8.3.0.0-371.jar

    pentaho kettle-engine-8.3.0.0-371.jar

    pentaho-kettle

    1. **kettle-core-8.3.0.0-371.jar**:这是Pentaho Kettle的核心库,包含了所有基本的数据集成功能。这个JAR文件提供了如作业(Job)、转换(Transformation)等核心对象的定义和执行,以及与数据库、文件系统等数据...

    基于Kettle工具的企业级数据同步方案

    Kettle,也称为Pentaho Data Integration (PDI),是一款强大的ETL(Extract, Transform, Load)工具,广泛应用于数据仓库和大数据集成项目。它支持在不同系统之间进行数据迁移、清洗和转换,具有高度灵活性和可扩展...

    kettle 8.2相关jar

    本文提供了kettle 8.2相关的5个jar,进行kettle相关插件的开发完成够用了。 如下为本kettle压缩包包含的文件: kettle-core-8.2.0.0-342.jar kettle-dbdialog-8.2.0.0-342.jar kettle-engine-8.2.0.0-342.jar ...

    Kettle 无人售货机项目实战数据包

    本项目“Kettle 无人售货机项目实战数据包”是针对ETL技术的具体应用实例,它以无人售货机的数据为背景,为我们提供了一个实际操作的数据处理和分析的平台。 首先,我们要理解ETL的三个主要步骤: 1. **提取...

    kettle数据清洗

    利用kettle工具进行数据清洗,按照条件去除不需要的内容

    kettle资源包kettle资源包kettle资源包kettle资源包kettle资源包kettle资源包kettle资源包

    6. **插件体系**:Kettle有一个开放的插件架构,允许开发人员自定义数据处理步骤,满足特定业务需求。社区提供了大量的第三方插件,丰富了Kettle的功能。 7. **分布式处理**:Kettle支持在多节点环境中运行,如...

    Maven 构建 Kettle 时所需的部分jar包

    首先,Maven是一个广泛使用的Java项目管理工具,它提供了一种标准化的方式来管理和构建Java项目。Maven通过依赖管理和项目信息管理,使得开发者能够轻松地解决项目的构建问题。它通过读取项目对象模型(Project ...

Global site tag (gtag.js) - Google Analytics