ETL工具—Kettle数据的导入导出—Excel表到数据库

news/2025/2/25 2:33:06

案例目的:当Excel中有几万条记录或者更多数据时,使用Kettle导入到数据库中。速度就能感到比复制粘贴快很多。

  • 这里我会演示将"data.xlsx"表中数据有15万多条记录,使用Kettle导入到oracle数据库的testuser用户下。

准备工作:1.data.xlsx表;

     2.testuser用户下要有一个与data.xlsx表结构(列数与字段类型)相同的表。

开始!!!

1.新建一个"转换",将"Excel输入"、"表输出"拖拽到新建的转换工作空间里

 "文件">"新建">"转换"打开下图,并展开左侧面板中的"输入"与"输出",将"Excel输入"与"表输出"拖拽到"转换1"工作区中。如图1所示:

图1:工作区拖拽了"Excel输入"与"表输出"效果图

 

2.设置"Excel输入"相关参数

1)、双击"转换1"工作区中的"Excel输入"的图标,打开设置窗口。

图2:填写"表类型"与"文件或目录"两行的内容

图3:点击增加后,目录就会在"选中的文件"中出现了

 

图4:我的数据在sheet1中,那就把sheet1选进列表中

 

图5:打开"字段"选项卡,点击"获取来自头部数据的字段",注意时间字段格式的正确性

 

3.设置"表输出"相关参数

1)、双击"a"工作区(我将"转换1"保存命名了a)中的"表输出"的图标,打开设置窗口。

 

图6:设置"数据库连接"的内容

图7:设置"目标模式"

图8:设置"目标表"

图9:设置本地表与数据库表的映射(也就是字段是否对应正确)

 

设置完成后点击"确定"完成设置。

4.运行,将表导入到数据库中。

图10:运行和启动

图11:检测运城结果

注:如果"步骤度量"中出现红色底纹,表示导入失败。查看日志中的提示。个人经验,最常出现的报错是,在"Excel输入"设置中,字段类型里日期型字段,被设置成了字符型。

 

结束!!!

 

 

 

转载于:https://www.cnblogs.com/dsjxmz/p/6884812.html


http://www.niftyadmin.cn/n/713078.html

相关文章

Transaction And Lock--存储过程中使用事务的模板

某公司内部使用的模板 create procedure [usp_my_procedure_name] as beginset nocount on;declare trancount int;set trancount trancount;begin tryif trancount 0begin transactionelsesave transaction usp_my_procedure_name;-- Do the actual work herelbexit:if tran…

机器学习笔记09:支持向量机(二)-核函数(Kernels)

核函数是 SVM 的最重要的部分,我们可以通过设置不同的核函数来创造出非常复杂的、非线性的支持向量机。 1.核(Kernel) 首先来看看什么是核函数。如图所示,假设有一个样本 x有两个特征 x1,x2,我们可以根据与地标(landmarks) l(1),l(2),l(3)的…

extjs框架_百花齐放的前端框架

01百花齐放的前端框架2007 年的时候我刚毕业,当时最火的前端框架是 jQuery 和 Ext JS,那时候大家纠结的问题是:我到底是用 jQuery 呢还是用 Ext JS 呢?后来又出现了:Adobe Flex、Microsoft SilverLight、Dojo、Ember、…

ZZULIOJ-1081,n个数求和 (多实例测试)(Python)

题目描述: 求n个整数的和。 输入: 输入第一行是一个整数T,表示有T组测试实例; 每组输入包括两行: 第一行一个数n表示接下来会有n个整数; 第二行空格隔开的n个数。 输出: 对于每组输入&…

性能测试之Jmeter学习(九)

本节主要学习:定时器(部分内容引用http://www.cnblogs.com/yangxia-test) Meter也有像LR中的集合点,本节就来介绍下JMeter的集合点如何去实现。 JMeter里面的集合点通过添加定时器来完成。 集合点:简单来理解一下&…

如何用idapython脚本获取字符串窗口的数据并写入文件

问题:当ida的strings窗口中字符串数量过多时,想直接用右键菜单的copy功能把所有字符串拷贝到文本文件中时,ida会一直处于忙状态,无法正常工作。此时可用idapython脚本获取字符串窗口的数据并写入文件,脚本内容如下def …

python中if语句的实例_对python中if语句的真假判断实例详解

说明 在python中,if作为条件语句,当if后面的条件参数为真时,则执行后面的语句块,反之跳过,为了深入理解if语句,我们需要知道if语句的真假判断方式。 示例 在python交互器中,经过测试发现以下条件…

Python基础运算符、字符串

最近在自学python,看的是《Python基础教程》,准备把所学、所想以及所得都记录下来。因为有python2和python3两个版本,并且差别还是蛮大的,我安装的是python3,而《Python基础教程》这本书又是以python2为蓝本讲解的。学…