对象存储Object Storage Service(简称OSS),是阿里云对外提供的海量、安全和高可靠的云存储服务。

背景信息

标准模式的工作空间支持数据源隔离功能,您可以分别添加并隔离开发环境和生产环境的数据源,以保护您的数据安全。详情请参见数据源开发和生产环境隔离

如果您想对OSS产品有更深了解,请参见OSS产品概述

OSS Java SDK请参见阿里云OSS Java SDK

操作步骤

  1. 进入数据源管理页面。
    1. 登录DataWorks控制台
    2. 在左侧导航栏,单击工作空间列表
    3. 选择工作空间所在地域后,单击相应工作空间后的进入数据集成
    4. 在左侧导航栏,单击数据源,进入工作空间管理 > 数据源管理页面。
  2. 数据源管理页面,单击右上角的新增数据源
  3. 新增数据源对话框中,选择数据源类型为OSS
  4. 新增OSS数据源对话框中,配置各项参数。
    OSS
    参数 描述
    数据源名称 数据源名称必须以字母、数字、下划线(_)组合,且不能以数字和下划线(_)开头。
    数据源描述 对数据源进行简单描述,不得超过80个字符。
    适用环境 可以选择开发生产环境。
    说明 仅标准模式工作空间会显示该配置。
    Endpoint OSS Endpoint信息,格式为http://oss.aliyuncs.com,OSS服务的Endpoint和区域有关。访问不同的区域时,需要填写不同的域名。
    说明 Endpoint的正确的填写格式为http://oss.aliyuncs.com,但http://oss.aliyuncs.com在OSS前加上Bucket值,以点号的形式连接。例如http://xxx.oss.aliyuncs.com,测试连通性可以通过,但同步会报错。
    Bucket 相应的OSS Bucket信息,指存储空间,是用于存储对象的容器。

    您可以创建一个或多个存储空间,每个存储空间可添加一个或多个文件。

    您可以在数据同步任务中查找此处输入的存储空间中相应的文件,没有添加的存储空间,则不能查找其中的文件。

    AccessKey ID 访问密钥中的AccessKey ID,您可以进入用户信息管理页面进行复制。
    AceessKey Secret 访问密钥中的AccessKey Secret,相当于登录密码。
    注意 准备OSS数据时,如果数据为CSV文件,则必须为标准格式的CSV文件。例如,如果列内容在半角引号(")内,需要替换成两个半角引号(""),否则会造成文件被错误分割。
  5. 单击数据集成页签下,相应资源组后的测试连通性
    数据同步时,一个任务只能使用一种资源组。您需要在每种资源组上单独测试连通性,以保证同步任务使用的数据集成资源组能够与数据源连通,否则将无法正常执行数据同步任务。详情请参见数据源测试连通性
  6. 测试连通性通过后,单击完成

后续步骤

现在,您已经学习了如何配置OSS数据源,您可以继续下一个教程。在该教程中,您将学习如何配置OSS插件,详情请参见OSS ReaderOSS Writer