`

使用kettle中遇到的问题

 
阅读更多

以4.2为例

1、使用Merge Join操作,数据大的时候会出现数据1条变两条一样的情况。但是在跑自带例子的时候没问题,数据量小的时候也没问题。我使用的记录为20w条,出现了重复问题。

2、使用Merge Join的left outer连接的时候,如果右边的数据连接值为空,则两边数据对应关系会乱掉,下面的会向上补齐。但是也不报错,不应该是这样的啊。开始设想右边如果为空应该也对应空的,和sql的做链接一样,但是它自己给补上了。

3、自带的定时任务,不释放内存,跑几遍就挂掉了。

分享到:
评论

相关推荐

    kettle_使用中的一些常见问题

    kettle 使用中的一些常见问题 问题1: 从excel 中抽取数据,插入到oracle 9 数据库中,报下面的错误. 2008/06/25 13:30:57 - 插入更新数据表.0 - Insert row: ![field1=1.3965E8, field2=1,798, field3=2002/05/27 00:...

    kettle遇到的问题和解决方法

    kettle编写遇到的问题和解决方法,性能优化,和文本文件输入中分隔符是不可见字符等问题

    jdk8-251 kettle9.2使用jdk版本

    jdk8-251 kettle9.2使用jdk版本

    kettle(学习手册、中文手册、Kettle使用培训文档)

    金融IT 来说,经常会遇到大数据量的处理,转换,迁移,所以了解并掌握一种 etl工具的使用,必不可少。 Kettle是一款国外开源的etl工具,纯java编写,绿色无需安装,数据抽取高 效稳定。是学习kettle的好资料!

    Kettle文档.zip

    kettle文档,对kettle中可能遇到的问题,kettle教程,kettle部署,测试,源代码分析等做了很多文本总结

    Kettle使用培训文档

    ETL(Extract-Transform-Load的缩写,即数据抽取、转换、装载的过程),对于金融IT来说,经常会遇到大数据量的处理,转换,迁移,所以了解并掌握一种etl工具的使用,必不可少。 Kettle是一款国外开源的etl工具,纯...

    Kettle源码编译流程说明

    Kettle源码编译流程说明,描述怎么编译kettle的源代码,以及遇到的问题解决方法

    kettle常见控件(输入、输出,字段选择、设置变量、记录集连接、值映射、字符串替换、js、Java)的使用案例

    包括数据库迁移,增量抽取,多表合成一张表,一个字段拆分成多字段,数据正则过滤、kitchen部署调优等案例,内含相应数据库的SQL脚本、kjb、ktr文件,以及使用过程中会经常遇到的bug注意事项

    遇见Kettle ETL工具课程入门-进阶-实战 遇见kettle etl工具.zip

    对于企业级的开发或应用,会遇到种种的数据转换,迁移等工作,所以作为开发者掌握ETL工具是必须的,那么其中Kettle就是一个强大的帮手,Kettle的数据抽取高效而又稳定,我们就来掌握它。课程内容带领同学们由浅入深...

    pentaho-kettle-master.zip

    ETL(Extract-Transform-Load的缩写,即数据抽取、转换、装载的过程, 我们经常会遇到各种数据的处理,转换,迁移,所以掌握一种 ETL 工具的使用必不可少。 Kettle 支持图形化的GUI设计界面,然后可以以工作流的...

    Kettle 使用说明书

    ETL(Extract-Transform-Load的缩写,即数据抽取、转换、装载的过程),对于金融IT 来说,经常会遇到大数据量的处理,转换,迁移,所以了解并掌握一种etl工具的使用,必不可少。Kettle是一款国外开源的etl工具,纯...

    Kettle转换中的Java代码步骤应用入门与实战

    在使用Kettle的过程中,有可能遇到现有步骤无法满足需求的情况。解决此类问题,有诸如购买第三方插件、开发插件、自定义Java类等办法。最后一种办法因其代价小且门槛较低而成为最为常用的定制方法。本文将解释Java...

    hive-jdbc-0.7.0-pentaho-1.0.2.jar解决kettle取hive数据乱码

    使用kettle抽取hive中的数据时,遇到了取数结果乱码的问题。替换此包可以解决

    ETL工具-kettle的探索

    在对ETL工具kettle的使用过程中遇到的问题的处理,和使用过程中的总结

Global site tag (gtag.js) - Google Analytics