本文为您介绍如何配置、复制、删除OSS组件。

背景信息

OSS输出组件适用于将Dataphin加工后的数据写入至OSS数据库,进行数据消费的场景。

配置属性

  1. 在离线单条管道脚本的开发页面,单击页面右上角的组件库
  2. 单击输出前的dgd图标。
  3. OSS组件拖到左侧的管道画布中。
  4. 鼠标悬停至OSS组件框内右键单击,选择属性配置
  5. OSS输出配置对话框,配置参数。
    参数 说明
    步骤名称 根据当前组件的使用场景,填写组件名称。
    数据源 选择数据源。选择Dataphin系统已配置的数据源,且数据源需同时具备以下两个条件:
    • 数据源的类型与输出组件的类型一致。
    • 执行属性配置的账号具有该数据源的同步写权限,如果没有权限,则需要申请数据源权限,详情请参见管理数据源权限
    同时您也可以单击数据源后的geg图片,添加数据源,详情请参见新建OSS数据源
    文件类型 系统支持的读取TXT和格式的文件。
    列分隔符 读取的字段分隔符。如果您没有填写,则系统默认将字段分隔符填写为英文逗号(,)。
    文件编码 读取文件的编码配置。系统支持的文件编码包括UTF-8GBK
    null值 将要表示为空的字段填入文本框,如果源端存在则将对应的部分转换为空。
    Object前缀 OSS的Object信息,此处可以支持填写多个Object。例如某个OSS的bucket中有yunshi文件夹,文件夹中有ll.txt文件,则Object直接填yunshi/ll.txt。
    前缀冲突 选择文件前缀冲突了后,系统的处理方式。
    输入字段 根据上游的输入,为您展示输入字段。
    输出字段 为您展示输出字段。单击字段管理
    • 单击gaagag图片,将已选的输入字段移入未选的输入字段
    • 单击agfag图片,将未选的输入字段移入已选的输入字段
    快速映射 根据上游的输入和目标表的字段,可以手动选择字段映射。快速映射包括同行映射同名映射
  6. 单击确认,完成OSS输出组件的属性配置。

复制OSS

  1. 鼠标悬停至OSS组件框内右键单击,单击复制
  2. 在管道画布中右键单击后,选择粘贴,完成OSS输出组件的复制。

删除OSS

  1. 鼠标悬停至OSS组件框内右键单击,单击删除
  2. 在确认弹框中单击确定,完成OSS输出组件的删除。