阿里云OSS迁移到BOS
背景信息
本文介绍由阿里云 OSS 迁移到 BOS 的操作教程。百度智能云数据流转平台是百度智能云提供的存储产品数据迁移服务。使用该服务,您可以将第三方数据轻松迁移至百度智能云对象存储 BOS。
使用数据流转平台 CloudFlow,您只需在控制台填写源数据地址和目标 BOS 地址信息,并创建迁移任务即可。启动迁移后,您可以通过控制台管理迁移任务,查看迁移进度等信息;也可以查看迁移失败文件列表,并中断、删除、恢复迁移任务等。
准备工作
开始迁移前,您需要在阿里云 OSS 和 百度智能云 BOS 中做一些准备工作。
阿里云OSS准备
预估迁移数据
预估需要迁移的数据,包括迁移存储量和迁移文件个数。您可以登录阿里云 OSS 控制台,单击某个待迁移存储空间的名称,查看待迁移存储空间(Bucket)的存储量和对象(文件)数量。
说明: 迁移任务的迁移时间取决于待迁移文件数量和文件容量。CloudFlow 会自适应您的迁移带宽性能,但若文件数量和容量较大,迁移时间可能较长。您可以在控制台查看迁移进程,若有迁移失败的文件,您可以导出失败文件并重传。
解冻存储空间待迁移数据
对于阿里云的冷归档存储(Cold Archive)、深度冷归档(Deep Cold Archive),您需要现在阿里云将相应文件解冻(取回),待解冻完成后再创建迁移任务。在线迁移服务并不会对源端数据执行解冻操作。若您源端有未解冻、解冻中的文件,则这些文件都会迁移失败。
说明: 请您务必解冻操作完成后再创建迁移任务。请您根据待迁移的数据总量确保解冻时长,以防迁移期间数据再次变成冻结状态。解冻(取回)操作可能会收取一定费用,计费规则可咨询您的源存储空间服务运营商。
百度智能云BOS准备
创建目标存储空间(Bucket)
创建目标存储空间,用于存放迁移的数据。详情请参见创建存储空间。
迁移实施
登录数据流转平台
1.登录数据流转平台CloudFlow
2.登录数据流转平台CloudFlow
进入控制台后,单击【新建迁移任务】,进入任务配置页面,进行迁移参数的设置。
任务设置
您需要对迁移任务的名称和迁移启动时间进行设置。
配置项 | 配置描述 |
---|---|
迁移任务名称 |
|
开始迁移时间 |
|
源端设置
您需要迁移源端信息进行设置。
配置项 | 配置描述 |
---|---|
数据源端 |
|
增量迁移 |
|
源端 Endpoint |
|
源端 AccessKey |
|
源端 SecretKey |
|
源 Bucket 名称 |
|
源文件前缀 |
|
源文件时间范围 |
|
目的端设置
您需要迁移目的端信息进行设置。
配置项 | 配置描述 |
---|---|
目的端 AccessKey |
|
目的端 SecretKey |
|
目的端 Bucket 名称 |
|
保存路径 |
|
存储类型 |
|
同名保留策略 |
|
ACL权限设置 |
|
迁移模式设置
您需要根据迁移需求选择合适的迁移模式,CloudFLow 支持半托管迁移和全托管迁移。关于迁移模式的介绍,请查看全托管迁移和半托管迁移介绍。
配置项 | 配置描述 |
---|---|
迁移模式 |
|
性能设置
您需要根据迁移需求选择合适的性能设置,CloudFLow 配置每秒文件数和迁移速度限制。如果整个迁移过程时间较长,可以利用限制迁移文件数和调整迁移速度,在低谷时加速迁移以确保业务稳定,而在高峰时减缓或暂停以控制成本。
配置项 | 配置描述 |
---|---|
性能配置 |
|
查看迁移状态和进度
在数据流转平台 CloudFlow 控制台,您可以查看所有迁移任务的状态和进度。
迁移状态
- 待迁移:若用户指定时间发起数据迁移,任务状态为待迁移;
- 任务完成有失败文件:任务完成,但部分文件迁移成功,部分失败。您可以在列表中查看迁移成功和失败的数量,并导出失败文件列表;
- 任务成功:任务完成,且文件全部迁移成功;
- 任务暂停:中途主动暂停迁移任务;
- 任务失败:计划迁移的文件全部迁移失败,0个文件迁移成功,您需要排查迁移失败的原因。
说明: 由于迁移任务时间可能较长,列表中迁移成功和失败的文件数量将会每 30 秒更新一次。若数字暂停,请耐心等待。
相关操作
- 查看详情:点击后查看任务配置详情和任务传输详情;
- 导出失败文件列表:点击后可以下载当前的迁移失败文件;
- 删除任务:任务完成后讲不需要的任务删除。任务删除后不影响已经迁移的文件;
- 暂停任务:当任务处于"迁移中"或者"待迁移"状态时将迁移任务暂停,适合迁移配置错误或不希望继续迁移的场景,以便及时阻止任务。点击暂停任务后,该按钮变为"恢复任务",点击后可断点重传。