全部文档
当前文档

暂无内容

如果没有找到您期望的内容,请尝试其他搜索词

文档中心

创建迁移任务

最近更新时间:2024-11-20 10:15:23

准备工作

  1. 在源站创建子用户,并将源桶授权给子用户,子用户在源站至少有读的权限。

  2. 根据自己的实际需求,预估需要迁移的文件数量和大小。

  3. 在金山云创建子用户,并将目标桶授权给该子用户,子用户在KS3需要读和写的权限。

新建迁移任务

  1. 登录控制台

  2. 点击左侧导航栏中的数据迁移服务,点击立即开通服务按钮,进入“迁移服务”页面,点击创建迁移任务,仔细阅读弹出的迁移服务条款协议,勾选“我理解如上条款,并接受条款内容”,单击下一步,进入“创建迁移任务”页面,如图所示。

image.png
  1. 配置迁移地址

  2. 任务名称
    输入自定义的迁移任务名称。

  3. 源站信息

    • 迁移源站
      在迁移源站的下拉列表中选择待迁移的源站云服务提供商,目前支持金山云、阿里云、百度云、七牛云、腾讯云、亚马逊云(中国)平台的对象存储数据迁移。

    • AccessKey、SecretKey
      输入源站账户对应的AK和SK。

    • 迁移源桶
      输入正确的AK和SK后,点击连接按钮,会获取到用户源站的桶列表,在下拉列表中选择需要迁移的源桶。

    • 选择迁移数据
      选择是迁移全部数据还是迁移按照前缀匹配的数据,若选择按照前缀匹配,则需要在文本框中输入对应的前缀。

  4. 目标站信息

    • AccessKey、SecretKey
      输入目标站账户对应的AK和SK。

    • 迁移目标桶
      输入正确的AK和SK后,点击连接按钮,会获取到目标站的桶列表,在下拉列表中选择需要迁移到的目标桶。

    • 保存路径
      可选择保存到根目录或者指定目录,若选择保存到指定目录,需填写目录名称。

    • 存储类型
      可选择标准存储或者低频存储。

  5. 配置迁移策略

  • 迁移方式

迁移方式

说明

配置项

全量迁移

迁移全量的数据,迁移完成后,任务会立即停止,不再对增量数据进行迁移

增量迁移

增量迁移的首次迁移会迁移全量的数据,迁移完成后,将会按用户指定的迁移间隔和迁移次数再对增量数据进行迁移

迁移间隔:可设置分钟或者小时级别的间隔,最小时间间隔为15分钟,最大时间间隔为60分钟。迁移次数:最少1次,最多30次

  • 迁移文件起点时间
    可选择全部迁移或者指定起点时间。全部迁移指不考虑文件的创建或者修改时间,迁移全部文件;指定起点时间后只迁移在您指定时间之后创建或修改过的文件。

  • 同名文件覆盖策略

覆盖选项

说明

不覆盖

对于同名文件,不进行任何判断,一律执行跳过

全覆盖

对于同名文件,不进行任何判断,一律执行覆盖迁移

条件覆盖

对于同名文件,二者的LastModified、Size或Content-Type有其一不相等,就会执行覆盖。警告: 这种方式如果源站中存在旧文件会覆盖目标站的新文件

最后修改时间优先

对于同名文件:
1. 如果迁移的源文件的最近修改时间晚目标同名文件,则进行覆盖,否则跳过
2. 若最后修改时间相同,则判断文件大小,如果迁移的源文件大小比目标同名文件大,则进行覆盖,否则跳过
3. 若最后修改时间和文件大小均相同,文件将会跳过执行

  1. 配置优化策略

  • 数据预估

    • 保障顺利完成迁移任务,精确统计迁移进度和成功率,请尽量精确评估您的迁移数据量和迁移文件个数。

    • 待迁移数据量:输入预估的数据量,可选择GB/TB/PB级别。

    • 待迁移文件个数:输入预估的文件数量,可选择个/万个/百万个/亿个级别。

  • 分时限流

    • 限流时间:支持指定多个限流时间段,但是每个限速时间段不允许重叠。

    • 带宽:支持指定限流的带宽。

文档导读
纯净模式常规模式

纯净模式

点击可全屏预览文档内容
文档反馈