首页 > 其他分享 >Kettle - 概述

Kettle - 概述

时间:2023-06-07 23:44:51浏览次数:56  
标签:控件 简介 Kettle job 概述 transformation ETL

官网】| 【历史版本

 

 

 

ETL简介

Kettle简介

transformation 和 job的区别

 

 

 

 

 

 

ETL简介

ETL,Extract-Transform-Load的缩写,即数据抽取、转换、装载的过程。

市面上常用的ETL工具有很多,比如Sqoop,DataX,Kettle,Talend等。

 

 

Kettle简介

Kettle是一款国外开源的ETL工具,纯java编写,可以在Window、Linux、Unix上运行,绿色无需安装,数据抽取高效稳定。

Kettle中文名称叫水壶,该项目的主程序员MATT希望把各种数据放到一个壶里,然后以一种指定的格式流出。

Kettle允许管理来自不同数据库的数据,通过提供一个图形化的用户环境来描述你想做什么,而不是你想怎么做。

Kettle中有两种脚本文件,transformationjobtransformation完成针对数据的基础转换,job则完成整个工作流的控制。

Kettle现在已经更名为PDIPentaho Data Integration-Pentaho 数据集成

 

transformation 和 job的区别

作业(job)是步骤流,转换(transformation)是数据流。这是作业和转换的最大的区别。

作业(job)的每一个步骤,必须等到前面的步骤都跑完了,后面的步骤才会执行;而转换(transformation)会一次性把所有控件全部先启动(一个控件对应启动一个线程),然后数据流会从第一个控件开始,一条记录、一条记录地流向最后的控件。

 

标签:控件,简介,Kettle,job,概述,transformation,ETL
From: https://www.cnblogs.com/harleyblogs/p/17464915.html

相关文章

  • 接入网(1)接入网概述和技术演变的过程
    一、概述1.接入网位于电信网络中的网络边缘,负责接入、汇聚终端用户的各种业务。2.在有线网络的发展历史中,有线网络经过众多的技术迭代,由从前的语音窄带接入,发展到xDSL、同轴电缆、光纤接入,接入带宽不断随业务需求增大。3.基于PON技术的P2MP光接入技术广泛应用于电......
  • 计算机三级-信息安全技术-信息安全保障概述
    去年五月份报的信息安全技术,考试时间为2022.9.26,因为封校和疫情原因,没有参加上;在这些期间准备时间只能说是10天,10天好像就有点多,大概一周吧,能考个及格,所以当大家备考时一定要老早准备,并关注一些不可预测性的事件防止发生。下面是我所收集的知识点,望大家参考学习故不积跬步无以......
  • Flink - 概述
    官网:https://flink.apache.org/ Flink是什么为什么选择Flink流处理的应用场景Flink的特点      Flink是什么是一个流式的数据流执行引擎,其针对数据流的分布式计算提供了数据分布,数据通信以及容错机制等功能。是一个框架和分布式处理引擎,用于对无界和有界......
  • Spring 学习笔记(3)—— Spirng 配置概述
    Spring容器高层视图Spring启动时读取应用程序提供的Bean配置信息(XML配置文件),并在Spring容器(ApplicationContext)中生成一份相应的Bean配置注册表,然后根据这张注册表实例化Bean,装配好Bean之间的依赖关系,为上层因公提供准备就绪的运行环境。Bean元数据信息在Spring容器......
  • 特殊文件:XML概述
          ......
  • [笔记]计算机网络_数据链路层_数据链路层概述
    大的要来力(悲)数据链路层是历年考试重点,要求在了解数据链路层基本概念的基础上,重点掌握滑动窗口机制、三种可靠传输协议、各种MAC协议、HDLC协议、PPP协议,特别是CSMA/CD协议和以太网帧格式,以及局域网的争用期和最小帧长的概念、二进制指数退避算法等等各种贵物,此外中继器、网卡......
  • Active Directory 域服务概述
    工作组和域工作组(WorkGroup):工作组是一种平等身份环境,各个计算机之间各为一个独立体,不方便管理和资源共享,在高端应用中,支持度不够,发挥不了高端应用的更多功能。域(Domain):域是一种管理单元,也是一个管理安全边界。域管理员只能管理域的内部,除非其他的域显式地赋予他管理权限,他才......
  • IO流:缓冲流-概述-字节缓冲流
       ......
  • 【低代码】低代码概述
    1初识低代码机缘巧合,2021年接触到了低代码,初见充满神秘,再见仍别具魅力。首先,低代码并非一个新的事物,但也并非新杯装陈酒。从历史来看,低代码并非横空出世;从应用发展来看,它任然稚幼。在行业内并没有低代码的一套统一的标准,整个行业还处于百家争鸣的时段,当然低代码作为aPaas/Saas(Soft......
  • 移动App测试概述:移动App特性
    移动App测试概述:移动App特性移动App在现代人的日常生活中扮演着越来越重要的角色,因而对于它们的质量和稳定性的要求也越来越高。为了确保App的质量,开发商需要进行充分的测试和检验。本文将讨论移动App的特性和需要测试的内容。移动App的特性包括:1.平台特性:移动App需要支持多种操作......