数据整合

最近更新时间:2023-06-16 11:30:02

查看PDF

结合多年数据处理行业经验,沉淀固化通用数据整合模型,将贴源数据的处理过程从繁复的代码逻辑中解放,仅需简单配置既可完成复杂贴源数据整合。

  1. 进入【项目空间】>【我的项目】,点击项目名称进入大数据开发套件。

  2. 点击进入【数据开发】>【离线作业开发】。

  3. 选择【任务开发】,点击image.png,新建一个作业流。

image.png

  1. 双击作业流,进入作业流开发面板,拖拽【数据整合】插件,输入节点名称,生成一个数据整合作业。

image.png

  1. 双击打开新建的数据整合作业,进入数据整合开发面板。在数据整合面板中可以选择需要应用的数据整合算法,目前数据整合算法包括:全量切片、增量切片、拉链/指定字段拉链、当前表、当前全量表。用户可根据需求选择不同类型整合算法。

image.png

image.png

  1. 确定好使用的拉链表后,选择一个应用数据源,目前数据整合算法仅支持MPP数据源。

image.png

  1. 确定好数据源后,选择应用算法的源表和目标表,每种算法在应用时目标表会比源表多一定的特定字段,除了新增的特定字段外,其他字段需要完全保持一致。

    如果选取字段不一致界面将提示进行表字段调整。

image.png

文档内容是否对您有帮助?

根本没帮助
文档较差
文档一般
文档不错
文档很好

在文档使用中是否遇到以下问题

内容不全,不深入
内容更新不及时
描述不清晰,比较混乱
系统或功能太复杂,缺乏足够的引导
内容冗长

更多建议

0/200

评价建议不能为空

提交成功!

非常感谢您的反馈,我们会继续努力做到更好!

问题反馈