ETL工具之kettle的使用之异构数据抽取MongoDB——>DB2「终于解决」

ETL工具之kettle的使用之异构数据抽取MongoDB——>DB2「终于解决」环境简介: 数据库版本:MongoDB 5.0.4 (查询语句:db.version(); ); DB2 9.7 ; kettle版本: 9.2 实现目标:将MongoDB(异构化数据) 抽取到DB2

环境简介

数据库版本:MongoDB 5.0.4  (查询语句:db.version(); ); DB2 9.7  ;     

kettle版本: 9.2

实现目标:将MongoDB(异构化数据) 抽取到DB2(结构化数据库);并增加时间戳,区分每天的数据。

具体实现步骤:

1、启动kettle

安装好kettle后, 打开data-integration, 双击Spoon.bat,  等待几秒出现图形操作界面;

ETL工具之kettle的使用之异构数据抽取MongoDB——>DB2「终于解决」

 

 

 

2、新建转换

点击菜单栏: 文件——新建——转换。

 

3、连接MongoDB

拖入组件Big Data 下的 MongoDB input 组件, 双击组件进行相关配置:

ETL工具之kettle的使用之异构数据抽取MongoDB——>DB2「终于解决」

 

 

 

 在 Configure Connection Tab选项里填写连接地址,端口,连接的用户,密码等;

Host name(s) or IP address(es):网络名称或者地址。可以输入多个主机名或IP地址,用逗号分隔。还可以通过将主机名和端口号与冒号分隔开,为每个主机名指定不同的端口号,并将主机名和端口号的组合与逗号分隔开。

Port:端口号
Username:用户名
Password:密码
Authenticate using Kerberos:指示是否使用Kerberos服务来管理身份验证过程。
Connection timeout:连接超时时间(毫秒)
Socket timeout:等待写操作(以毫秒为单位)的时间

ETL工具之kettle的使用之异构数据抽取MongoDB——>DB2「终于解决」

Input Options Tab选项里填写需要抽取的集合名称

 ETL工具之kettle的使用之异构数据抽取MongoDB——>DB2「终于解决」

 

 

Fields Tab选项里,点击Get fields,页面会出现选择文档里的所有字段,可以在字段上右键,删除不需要接入的字段 

ETL工具之kettle的使用之异构数据抽取MongoDB——>DB2「终于解决」

 

设置完成后,点击最下方”预览“,检查是否是所需要的数据

ETL工具之kettle的使用之异构数据抽取MongoDB——>DB2「终于解决」

 

 

 

 4、获取变量,增加时间戳字段

ETL工具之kettle的使用之异构数据抽取MongoDB——>DB2「终于解决」

 

5、字段选择:点击”获取选择的字段“(如有不需要的字段, 右键删除即可)

 

 

 

 ETL工具之kettle的使用之异构数据抽取MongoDB——>DB2「终于解决」

 

 

 

 6、表输出,配置DB2连接

ETL工具之kettle的使用之异构数据抽取MongoDB——>DB2「终于解决」

 

 

 

 7、配置完成,点击保存, 运行即可。

 ETL工具之kettle的使用之异构数据抽取MongoDB——>DB2「终于解决」

 

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。
转载请注明出处: https://daima100.com/5613.html

(0)
上一篇 2023-05-02
下一篇 2023-05-02

相关推荐

发表回复

您的电子邮箱地址不会被公开。 必填项已用*标注