数据同步

数据同步
文档首页 / 数据同步

数据同步

更新时间:2018-01-24


数据接入

DB或FTP数据接入到指定的Hive或HDFS中,选择定义好的数据接入资源,运行后定时批量接入数据。

变量写变量名,sqoop里传过来的如分区值的变量day_id,值用${}表示,写${day_id},工作流前节点传过来的;如果是常量,直接写成20160913 ‘admin’ 即可(字符串要用单引号括起来) 。

图 数据接入节点界面.png

图 数据接入节点界面


相关参数说明:

字段名称

字段说明

节点Id

由用户自定义,用来标识该服务的唯一性。

节点名称

由用户编写,用来标识该节点的名称。

项目

将要调用的流程所在的项目。

导入类型

DB数据接入或FTP数据接入资源。

接入资源

根据导入类型选择已定义好的该项目内的数据接入资源。

备注

由用户编写,用来简述该节点的相关信息。

 

数据导出

将Hive或HDFS中的数据导出至DB或FTP中,选择定义好的数据导出资源,运行后定时批量导出数据。

变量写变量名,sqoop里传过来的如分区值的变量day_id,值用${}表示,写${day_id},工作流前节点传过来的;如果是常量,直接写成20160913 ‘admin’ 即可(字符串要用单引号括起来) 。

图 数据导出节点界面.png

图 数据导出节点界面


相关参数说明:

字段名称

字段说明

节点Id

由用户自定义,用来标识该服务的唯一性。

节点名称

由用户编写,用来标识该节点的名称。

项目

将要调用的流程所在的项目。

导出类型

数据导出DB或FTP数据导出资源。

导出资源

根据导入类型选择已定义好的该项目内的数据导出资源。

备注

由用户编写,用来简述该节点的相关信息。

 

立即咨询

请填写以下信息,我们将安排相关团队与您联系。

提交咨询
%{tishi_zhanwei}%