七牛云遷移數(shù)據(jù)到阿里云OSS教程遷移實施
本文介紹數(shù)據(jù)遷移的注意事項和操作步驟。
在線遷移需注意以下問題: 在線遷移會占用源地址和目的地址的網(wǎng)絡(luò)資源。若您的業(yè)務(wù)比較重要,建議您對遷移任務(wù)設(shè)置限速,或在空閑時間啟動遷移任務(wù)。 在線遷移前會檢查源地址和目的地址的文件,但是若您源和目的有相同文件名的文件,且源地址的文件更新時間比目的地址文件更新時間晚,遷移時會直接覆蓋目的地址的文件。若兩個文件內(nèi)容不同,必須更改文件名或做好備份。 在線遷移目前僅支持單次遷移單個 Bucket 數(shù)據(jù),無法將整個賬號的數(shù)據(jù)一次性遷移。 登錄阿里云數(shù)據(jù)在線遷移控制臺。 選擇,然后單擊創(chuàng)建數(shù)據(jù)地址。 在創(chuàng)建數(shù)據(jù)地址頁面,配置如下參數(shù),然后單擊確認。 您可以在七牛云管理控制臺,進入對象存儲頁面,選擇指定的存儲空間,在融合 CDN 測試域名或融合 CDN 加速域名一欄,查看域名。 注意 融合 CDN 測試域名每日限流 10GB,超過 10GB 的數(shù)據(jù),建議分次遷移或使用融合 CDN 加速域名。詳情請參考測試域名使用規(guī)范。 遷移全部數(shù)據(jù):遷移整個 Bucket 中的數(shù)據(jù)。 遷移全部數(shù)據(jù)時,無需填寫 Prefix。 遷移部分數(shù)據(jù):遷移指定目錄(前綴)下的文件。格式要求不能以正斜線(/)開頭,要以正斜線(/)結(jié)尾,例如 系統(tǒng)提示該功能在公測中,需要提交白名單權(quán)限申請。單擊去申請。 填寫相關(guān)信息,提交遷移公測申請。申請通過后,您將收到短信提醒。 選擇,然后單擊創(chuàng)建數(shù)據(jù)地址。 在創(chuàng)建數(shù)據(jù)地址頁面,配置相關(guān)參數(shù),然后單擊確定。 根據(jù)您數(shù)據(jù)所在區(qū)域,選擇一個 Endpoint。 詳情請參見訪問域名。 說明 將第三方數(shù)據(jù)遷移到OSS時,只能選擇外網(wǎng) Endpoint 訪問 OSS。 注意 若您遷移的源地址文件中有以正斜線(/)開頭的文件名,配置目的地址的時候需要添加一個 OSS Prefix,否則會導(dǎo)致遷移失敗。例如:需要遷移的文件中包含 /test/test.png 這個文件,您需要添加一個 OSS Prefix,如:oss/。當(dāng)遷移完成后, http://oss-cn-endpoint.aliyuncs.com:表示使用HTTP協(xié)議的外網(wǎng) Endpoint 訪問 OSS。 https://oss-cn-endpoint.aliyuncs.com:表示使用HTTPS協(xié)議的外網(wǎng) Endpoint 訪問 OSS。 選擇,然后單擊創(chuàng)建遷移任務(wù)。 在創(chuàng)建遷移任務(wù)頁面,閱讀遷移服務(wù)條款協(xié)議,勾選我理解如上條款,并申請開通數(shù)據(jù)遷移服務(wù),然后單擊下一步。 在配置任務(wù)頁簽,配置如下參數(shù),并單擊下一步。 注意 若您源地址和目的地址屬于不同的國家,您在配置遷移任務(wù)前需提交工單,申請開通創(chuàng)建跨國遷移任務(wù)的權(quán)限。您需承諾您的業(yè)務(wù)屬于合法經(jīng)營,數(shù)據(jù)的流動符合當(dāng)?shù)胤煞ㄒ?guī),數(shù)據(jù)沒有違法違規(guī)信息。 說明 注意 全量遷移和增量遷移均會在每次遷移開始前,對源地址和目的地址的文件進行對比。如果遷移同名文件,則以下三種情況的目標(biāo)地址文件會被覆蓋。 遷移全部:遷移所有時間的文件。 指定時間:只遷移指定時間之后創(chuàng)建或修改的文件。例如:指定時間設(shè)置為:2018-11-01 08:00:00,則只遷移 2018年11月1日8 點之后創(chuàng)建或修改的文件,在這個時間之前創(chuàng)建或修改的文件被忽略。 源地址文件與目標(biāo)地址文件的Content-Type不一致,目標(biāo)地址文件會被覆蓋; 源地址文件的更新時間晚于目標(biāo)地址,目標(biāo)地址文件會被覆蓋; 源地址文件與目標(biāo)地址文件的大小不一致,目標(biāo)地址文件會被覆蓋。 全量遷移:根據(jù)遷移起點時間遷移一次指定遷移起點時間之后的全量數(shù)據(jù),數(shù)據(jù)遷移完成后任務(wù)結(jié)束。如果之后源數(shù)據(jù)有變化,您可以再次提交全量遷移任務(wù),系統(tǒng)將僅遷移變化的數(shù)據(jù)。 增量遷移:按設(shè)定的增量遷移間隔和增量遷移次數(shù)執(zhí)行遷移任務(wù)。首次根據(jù)遷移起點時間遷移指定遷移起點時間之后的全量數(shù)據(jù)。首次遷移完成后,按照增量遷移時間間隔執(zhí)行增量遷移任務(wù),將源地址從前次遷移任務(wù)開始后到下次遷移開始前新增或修改的增量數(shù)據(jù)遷移至目的地址。如果配置的增量遷移次數(shù)是 N,則執(zhí)行 1 次全量遷移,之后執(zhí)行 N-1 次增量遷移。例如:設(shè)置遷移間隔 1 小時,遷移次數(shù) 5 次,遷移起點時間為 2019-03-05 08:00,當(dāng)前時間為 2019-03-10 08:00。則首次遷移最后修改時間在 2019-03-05 08:00~2019-03-10 08:00 之間的文件。假設(shè)遷移任務(wù) 1 小時完成,第二次遷移則從 2019-03-10 10:00 (遷移 1 小時,遷移間隔 1 小時)開始,遷移最后修改時間在 2019-03-10 08:00~2019-03-10 10:00 之間的文件,共進行 1 次全量遷移和 4 次增量遷移。 目錄不能以正斜線(/)或者反斜線(\)開頭,并且目錄中不能出現(xiàn)雙斜線(//),點號(..)和雙引號("),提交的所有目錄總字符長度不能超過 10KB。 目錄要以正斜線(/) 結(jié)尾,例如docs/。 最多可設(shè)置20個排除目錄或者包含目錄。 不過濾:不過濾遷移目錄。 排除:遷移時,不遷移排除目錄下的文件和子目錄。 包含:遷移時,只遷移包含目錄下的文件和子目錄。 在性能調(diào)優(yōu)頁簽的數(shù)據(jù)預(yù)估區(qū)域,填寫遷移存儲量和遷移文件個數(shù)。 說明 為了遷移任務(wù)的順利進行,請盡量準(zhǔn)確進行數(shù)據(jù)預(yù)估。詳情請參見預(yù)估遷移數(shù)據(jù)。 (可選)在性能調(diào)優(yōu)頁簽的流量控制區(qū)域,設(shè)置限流時間段和最大流量,然后單擊添加。 說明 為了不影響您在線業(yè)務(wù)的訪問,建議您根據(jù)業(yè)務(wù)訪問的波峰和波谷來設(shè)置遷移時的限流時間段和最大流量。 單擊創(chuàng)建,等待遷移任務(wù)完成。 為什么數(shù)據(jù)遷移的速度很慢? 檢查是否使用的是七牛的融合 CDN 測試域名。若使用的測試域名,建議您更換融合 CDN 加速域名創(chuàng)建遷移任務(wù)。七牛的測試域名有單 IP 訪問次數(shù)和帶寬的限制。 檢查域名的使用場景,七牛云不同的域名場景,使用的帶寬不一樣。例如:創(chuàng)建域名使用場景時選擇的是網(wǎng)頁平臺,帶寬量有限。此時,將這個域名作為源地址的 Endpoint 時,源端帶寬會很低,導(dǎo)致數(shù)據(jù)遷移的速度慢。這種情況需要給七牛提交工單,修改域名使用場景。注意事項
步驟一:創(chuàng)建源地址
參數(shù) 是否必需 說明 數(shù)據(jù)類型 是 選擇 QI NIU 。 數(shù)據(jù)名稱 是 輸入 3-63 位字符。不支持短橫線(-)和下劃線(_)之外的特殊字符。 Endpoint 是 填寫存儲空間所在區(qū)域?qū)?yīng)的域名。填寫格式:http://融合 CDN 測試域名或者http://自定義融合 CDN 加速域名。 Bucket 是 七牛對象存儲的存儲空間,這里您只需填寫自定義名稱。例如空間名稱為 tony-1234567890,則填寫 tony 。Prefix 是 AccessKey和SecretKey 是 輸入用于遷移的云 API 密鑰。推薦您為遷移服務(wù)新建密鑰,遷移完成后刪除。 data/to/OSS/ 。步驟二:創(chuàng)建目的地址
參數(shù) 是否必需 說明 數(shù)據(jù)類型 是 選擇 OSS。 數(shù)據(jù)所在區(qū)域 是 選擇目的地址所在的地域。 數(shù)據(jù)名稱 是 輸入 3-63 位字符。不支持短橫線(-)和下劃線(_)之外的特殊字符。 OSS Endpoint 是 AccessKeyId 和 AccessKeySecret 是 輸入用于遷移的AccessKey。詳情請參見創(chuàng)建AccessKey。 OSS Bucket 是 選擇一個存儲空間,用于存儲遷移數(shù)據(jù)。 OSS Prefix 否 格式要求不能以正斜線(/) 開頭,要以正斜線(/) 結(jié)尾,如 data/to/oss/。如果為空表示遷移至所選存儲空間的根目錄。/test/test.png 的 OSS 文件名變?yōu)?nbsp;oss//test/test.png。步驟三:創(chuàng)建遷移任務(wù)
參數(shù) 是否必需 說明 任務(wù)名稱 是 輸入 3-63 位小寫字母、數(shù)字、短橫線(-),且不能以短橫線(-)開頭或結(jié)尾。 源地址 是 選擇已創(chuàng)建的源地址。 目的地址 是 選擇已創(chuàng)建的目的地址。 指定目錄 否 遷移方式 是 遷移起點時間 是 增量遷移間隔 是(針對增量遷移) 默認值 1 小時,最大值 24 小時。 增量遷移次數(shù) 是(針對增量遷移) 默認值 1 次,最大值 30 次。 常見問題
標(biāo)簽
熱門文章更多>
- 深圳阿里云代理商:ECS部署SSL證書與到期提醒配置全攻略
- 上海阿里云代理商:阿里云服務(wù)器SSL證書備份方案
- 北京阿里云代理商:RDS讀寫分離配置指南
- 重慶阿里云代理商:用好 OSS 生命周期 降低長期存儲花費
- 上海阿里云代理商:DMS 多庫同步搭建 異構(gòu)數(shù)據(jù)庫集成實操
- 上海阿里云代理商:阿里云SLB健康檢查異常排查:端口、網(wǎng)絡(luò)、應(yīng)用狀態(tài)一步到位
- 重慶阿里云代理商:阿里云Redis延遲突然升高?慢查詢大Key連接數(shù)排查指南
- 廣州阿里云代理商:阿里云ACK Pod Pending?三步排查與節(jié)點擴容實戰(zhàn)
- 深圳阿里云代理商:阿里云ECS降本增效方法:實例、帶寬、云盤省錢全攻略
- 上海阿里云代理商:阿里云函數(shù)計算冷啟動優(yōu)化
- 廣州阿里云代理商:阿里云ECS防CC攻擊安全加固配置教程
- 深圳阿里云代理商:阿里云Linux接口慢全鏈路排查指南
- 上海阿里云代理商:阿里云ECS CPU滿載診斷修復(fù)全指南
- 重慶阿里云代理商:阿里云ECS規(guī)格選型與彈性伸縮降本實戰(zhàn)指南
- 深圳阿里云代理商:阿里云STAROps自動巡檢告警配置指南
- 深圳阿里云代理商:云服務(wù)器AI運維權(quán)限管控策略,如何規(guī)避誤操作風(fēng)險?
- 上海阿里云代理商:后端開發(fā)者私有AI大模型云端部署完整流程指南
- 北京阿里云代理商:AI日志分析工具,快速定位服務(wù)器異常宕機實戰(zhàn)指南
- 重慶阿里云代理商:AI腳本自動化完成云服務(wù)器批量運維配置實戰(zhàn)指南
- 廣州阿里云代理商:大模型推理部署,服務(wù)器內(nèi)存調(diào)優(yōu)實操全攻略

