iT邦幫忙

0

圖像備份到NAS 備份問題

  • 分享至 

  • xImage

AOI圖像備份到NAS 備份問題

該設備拍照1年多存了有7TB多 5~6百萬照片與幾萬個資料夾
分機型與子資料夾為該天日期

備份到NAS
每次用FreeFileSync 跑比對後會超過30分鐘以上 更新上去都會跑很久
是否有其他的同步備份軟體?可以減少比對的時間?

為了減少比對時間與好分時間備份壓縮 是否可以分開資料夾儲存?

想問問各位的看法 謝謝
/images/emoticon/emoticon08.gif

@mytiny 網路環境 相關型號

拍照儲存區 -> 轉存區 -> NAS區

拍照儲存區 WINDOWS10 1TB HDD 3.5吋的 硬體忘記了
網卡接到轉存區某個網卡上

轉存區 WINDOWS10 I3-8100T 開機SSD 配2.5吋HDD存圖像 兩個1GbE網卡
1條接到管道間 HPE SWITCH 1420 16G

備份時間為晚上 確認該期間無其他備份活動

NAS區域 RS4017xs+ HDD 不確定是接在10GbE 還是 1GbE

轉存區與NAS區域相差2樓 走大樓管道間

管道間線材都是 CAT5E

看更多先前的討論...收起先前的討論...
spplkksyy iT邦新手 1 級 ‧ 2024-02-01 21:43:45 檢舉
讓FreeFileSync跑多線程
copemoe iT邦好手 2 級 ‧ 2024-02-02 14:49:37 檢舉
@spplkksyy 多線程必須贊助 有看到FreeFileSync13版 如果商用就需要購買授權了
7 * 1024 / 125 * 2 約等於 115
但是因為是小檔案所以這各時間會多很多倍
7TB 單檔只要約兩分鐘,但是小檔案多的話 5-6百萬各檔案
能半小時比對完畢算非常非常的快 ...
我們公司本機 SSD 比對 兩千萬個檔案也是要 10~15分鐘
SSD 的速度是 800MB/S 計算如下
2000 / 500 = 4
800 / 125 = 6.4
10.4 * 10 = 104 大概要 1小時 44分鐘,所以半小時實際上算起來還比我們快好幾倍
其實建議在NAS 利用 ISCSI 建立一個存放區,然後建立一個 VHD 檔案,MOUNT 到本機
接著把檔案都放到這各VHD檔案內,NAS 本身就有備份計畫,這樣速度才會快
圖片
  直播研討會
圖片
{{ item.channelVendor }} {{ item.webinarstarted }} |
{{ formatDate(item.duration) }}
直播中
2
mytiny
iT邦超人 1 級 ‧ 2024-02-01 10:26:50

大容量備份及同步牽涉很多
系統設備與網路環境都會有影響
不僅僅是備份軟體
建議樓主先述明相關型號與網路環境
各路大神才好做建議
在下則是建議先改為10G的網路環境
請參考

copemoe iT邦好手 2 級 ‧ 2024-02-01 12:01:03 檢舉

已補充回覆 請參考

mytiny iT邦超人 1 級 ‧ 2024-02-02 09:53:34 檢舉

首先建議網路每個階段都採用10G網路連線
意思即網卡到交換器到NAS都是10G網路
交換器1420-16G完全沒有10G網路需要更換
如果能用光纖介面最好,
不然至少用cat.6/6a線路

至於群暉的NAS樓主已用的不錯應有10G介面
同時原廠都有提供專屬的備份方案
建議樓主可免費直接與原廠詢問

0
by2048
iT邦高手 1 級 ‧ 2024-02-01 10:35:19

要使用NAS支援的備份軟體速度才會快一些,通用的備份軟體都不快(因為檔案數多)

copemoe iT邦好手 2 級 ‧ 2024-02-02 14:48:25 檢舉

這方面的NAS備份軟體 我去搜尋看看

0
sam0407
iT邦大師 1 級 ‧ 2024-02-02 11:38:45

一年7T的資料,一天大概就是27G(一個月以22工作天計算)

看到您的資料已經有分日期了,那就只要備份當天產生的檔案不就好了?現在NAS也內卷的很厲害,直接用套件中心裡的備份軟體作增量備份就足夠了~~

copemoe iT邦好手 2 級 ‧ 2024-02-02 14:48:13 檢舉

這方面的NAS備份軟體 我去搜尋看看

我要發表回答

立即登入回答