kettle modified javascript 步骤的一个例子
例子里用到的org.htmlparser.Parser是一个html的解析器，可以在sourceforge上下载。这个例子使用org.htmlparser.Parser包来解析一个html格式的字符串，要解析的html字符串保存在conntentOld字段里。解析过程去除了html格式里所有标签，并将结果保存在cont...
ETL技术( Extract-Transform-Load) 数据仓库技术-比如kettle
每次面试，互联网的面试官，经常问我有没有用过ETL,每次我都懵逼，说没用过，觉得是多么高大上的东东，数据仓储今天查了一下，我晕，自己天天用的Kettle就是最典型的ETL，可以实现不同数据库之间的数据抽取，转换，只需要你有相应的数据库driver即可查了一下资料记录一下：ETL，是英文Extract-Transform...
Kettle (5)
使用Kettle获取网页数据。当然，这里的网页数据主要指结构化数据，可能是xml格式、json格式或者csv文件等。以http://services.odata.org/V3/Northwind/Northwind.svc/Products/为例，这是odata提供的符合REST规范的数据。通过这个url获取的产品数据...
KETTLE——（二）数据抽取
过了个春节，好长时间没有更新了，今天接着写第二部分——数据抽取。进入界面以后会发现左侧菜单有两个东西：转换和作业；简单说一下，转换是单次的转换，不可重复，但可重复利用；作业是汇聚了其他操作和多次（可单次）转换，可定时触发，可定时循环。集体情况后面方便再说。KETTLE支持很多的种形式的数据输入...
ETL-Kettle学习笔记（入门，简介，简单操作）
Kettle:简介ETL:简介ETL（Extract-Transform-Load的缩写，即数据抽取、转换、装载的过程），对于企业或行业应用来说，我们经常会遇到各种数据的处理，转换，迁移，所以了解并掌握一种etl工具的使用，必不可少的，Kettle就是强大的ETL工具。Kettle:概念 Kettle是一款国...
Kettle 中转换(transformation)的执行过程
1，Spoon.java的main方法是整个Kettle运行的入口。当打开Kettle的设计器界面后，可以在其中设计作业和转换。这里讨论转换的执行过程。2，设计好一个转换后，转换保存的本地文件是.ktr文件。从.ktr文件中可以读取出该转换的元数据transMeta。3，点击运行按钮时，触发监听器，调用Spoon.ja...
Kettle基本概念学习
一，理解开发环境与生产环境。比如，在windows或mac下设计好流程之后，把该设计文件上传到linux集群的机器上执行。那么，在windows下进行的工作即为开发环境，任务具体在linxu机器上执行即为生产环境。 二，Kettle转换转换包括一个或多个步骤，步骤之间通过跳(hop)来连接。跳定义了一个单向通...