iT邦幫忙

0

檔案同步的傳輸量

  • 分享至 

  • xImage

假設有10GB量的檔案異動(新增),任何同步技術都會產生10GB的傳輸量. 這句話是絕對的嗎?
還是有甚麼同步技術可以讓傳輸量小於10GB.

望空 iT邦新手 2 級 ‧ 2024-05-06 11:46:59 檢舉
dell有資料bitmap化,以及各大廠也有資料去重複技術,可以降低傳輸量,建議去看各大廠的去重複技術
sam0407 iT邦大師 1 級 ‧ 2024-05-06 13:27:24 檢舉
不一定,以Stroage上的同步來說,如果一個10GB異動了,您用File level就是要傳輸10GB,用Block level則只傳輸有異動的Block,會減少很多的傳輸量
壓縮與去重複可以減低傳輸量
多線程可以減少傳輸時間
這些都有解決方案,不想 1:1 就是花錢買方案,買線路,買設備
圖片
  直播研討會
圖片
{{ item.channelVendor }} {{ item.webinarstarted }} |
{{ formatDate(item.duration) }}
直播中

2 個回答

1
㊣浩瀚星空㊣
iT邦大神 1 級 ‧ 2024-05-06 13:03:22
最佳解答

假設有10GB量的檔案異動(新增),任何同步技術都會產生10GB的傳輸量. 這句話是絕對的嗎?

大多數來說是絕對的。

如果是即時同步。這一般來說很少會用壓縮處理。
這樣傳送的比例自然就是1:1。

但如果是固定長時間。且單位最小是小時的情況下。
有可能會採用壓縮處理。這樣可以達到同步傳輸量會降低。

當然,以上是指你真的有10GB的新東西而言。
如果並不是的話。一般來說會有對等相同檔不傳輸。
而如何判斷對等檔案相同。有分很多種技術。

最簡單的是判斷更新時間或是容量。
一些FTP的更新上傳大多是用更新時間

比較複雜的則是採用MD5檢驗表

其它還有同步指令處理..定時檢查處理...等等技術。

vit5015 iT邦新手 2 級 ‧ 2024-05-06 13:15:41 檢舉

感謝,很有幫助.

2
Ray
iT邦大神 1 級 ‧ 2024-05-06 11:52:43

在不損失原始資料的前提下, 有兩種技術可以減少傳輸資料量:
1.壓縮/解壓縮 (Compression/Decompression)
2.重複數據刪除 (De-duplication, 簡稱 Dedup)

看你的裝置可以支援哪一種?

我要發表回答

立即登入回答