Board logo

標題: [技術討論] 校驗兩份相同備份文件 [打印本頁]

作者: hkjake    時間: 2016-12-30 16:21     標題: 校驗兩份相同備份文件

買了USB DOCKING加3.5硬盤打算做一式兩份offline backup,主要是備份相片及 Word/Excel文件。
利用Freefilesync或直接Copy&Paste,間中會發現其中一份相片變半綠或出現「Windows無法檢視照片檔案」,兩個相同文件夾大小有出入。

手動ALT+TAB、用詳細資料看大小、用找相同文件software(好像沒反向選擇)太費時失事,請問有沒有批量自動校驗文件software?MD5好像要很長時間,文件大小應該OK,還是直接用 5.25換 3.5 抽取做RAID1方便?

相少左一兩張都接受到,就怕Word/Exce有一兩份開唔到
作者: hhstacy    時間: 2016-12-31 02:42

提示: 作者被禁止或刪除 內容自動屏蔽
作者: hhstacy    時間: 2016-12-31 02:43

提示: 作者被禁止或刪除 內容自動屏蔽
作者: vsp    時間: 2016-12-31 10:04

自己上google研究下xxcopy(free for personal use)
作者: twaiho2003    時間: 2016-12-31 10:49

相片半綠姐係jpg file, 錯左最少1個byte

抄file 會corrupt ? 我一次都未見過
似係 ' Freefilesync '  呢個software問題

我諗到個 人手solution

1. 將要抄的file(s)   zip左佢
2. checksum    個zip檔
3. del zip檔
4. 由主機 抄files 落external hdd 或usb 手指
5. 由external hdd 或usb 手指   抄返落主機,
6. zip 左岩岩 抄返落主機的files
7. checksum個zip 檔
8. compare 兩個checksum
作者: EITCo    時間: 2016-12-31 11:08

MD5好像要很長時間
hkjake 發表於 2016-12-30 16:21



MD5或其他hash慢係因為要每個檔案由頭睇到尾
但唔係咁做,就無法保證檔案每個bit都無出錯

如果要快就要係只睇大小同修改日期,咁用返FreeFileSync掃多次都應該發現到

你間中就會抄壞野咁頻密,使唔使睇下個硬碟有無事先

怕文件出事,一係對文件用FreeFileSync以內容比較多次 (即係hash)

變動多的文件可以用版本控制功能,留住最近若干個版本,出事唔使由白紙做過
http://www.freefilesync.org/manual.php?topic=versioning

如果懷疑係FreeFileSync抄錯野就試下另一款

----
封存唔會修改的檔案,例如相,我會用MultiPar整個redundancy file
https://multipar.eu/practical-hints/verify-and-repair
專應付你呢種情況,損壞左一兩個細檔案或一個大檔案的一小段,都有望有救
其實原理類同RAID,不過係under file system,我認為幾適合用係外置硬碟同雲端
唔知點解無乜人講
作者: vsp    時間: 2016-12-31 11:26

相片半綠姐係jpg file, 錯左最少1個byte

抄file 會corrupt ? 我一次都未見過
似係 ' Freefilesync '  呢個 ...
twaiho2003 發表於 2016-12-31 10:49

usb docking 或硬碟controller出事,就會有這個現象
作者: hhstacy    時間: 2016-12-31 11:59

提示: 作者被禁止或刪除 內容自動屏蔽
作者: hhstacy    時間: 2016-12-31 11:59

提示: 作者被禁止或刪除 內容自動屏蔽
作者: domumu    時間: 2016-12-31 14:36

提示: 作者被禁止或刪除 內容自動屏蔽
作者: mcdull    時間: 2016-12-31 14:38

買了USB DOCKING加3.5硬盤打算做一式兩份offline backup,主要是備份相片及 Word/Excel文件。
利用Freefile ...
hkjake 發表於 2016-12-30 16:21



    Freefilesync 我印像有option
作者: harryytm    時間: 2016-12-31 15:49

本帖最後由 harryytm 於 2016-12-31 16:09 編輯

對比大量檔案嘅Hash可以用HashCheck,佢可以批量產生檔案嘅校驗檔案,支援CRC-32、MD5、SHA-1、SHA-256、SHA-512。
https://github.com/gurnec/HashCheck/releases

用法好簡單,左按你想產生完整性檢查檔嘅資料夾或檔案,按 "建立校驗檔案",之後就會問你想建立邊種校驗檔案,然後按OK就會開始幫你建立校驗檔案,之後將個校驗檔案搬去另要校驗嘅檔案同一個位置,之開啟個檔案就會開始校驗。
作者: Frozen    時間: 2016-12-31 15:49

你個USB DOCKING睇黎。。。。。。。。
作者: harryytm    時間: 2016-12-31 15:54

本帖最後由 harryytm 於 2016-12-31 15:56 編輯
Freefilesync 我印像有option
mcdull 發表於 2016-12-31 14:38

喺GlobalSettings.xml入面將VerifyCopiedFiles Enabled改成True,FreeFileSync就會喺複制檔案嘅時候檢查埋檔案內容唔一樣。以
[attach]1950027[/attach]
[attach]1950028[/attach]
作者: harryytm    時間: 2016-12-31 15:58

相片半綠姐係jpg file, 錯左最少1個byte

抄file 會corrupt ? 我一次都未見過
似係 ' Freefilesync '  呢個 ...
twaiho2003 發表於 2016-12-31 10:49


我用Freefilesync抄2TB野都未試過有間題,我覺得係樓主個Dock有問題多啲。
作者: hkjake    時間: 2016-12-31 18:37

感謝以上咁多位師兄,但假期家庭事情比較多,我下星期再研究
作者: hhstacy    時間: 2016-12-31 19:47

提示: 作者被禁止或刪除 內容自動屏蔽
作者: hkjake    時間: 2017-1-3 12:25

回覆 14# harryytm


    Thanks Ching,呢個方法最簡單直接,唔駛用腦
同埋可以順便CHECK埋個DOCKING,咁多CHING都咁講估唔到DOCKING都會出事
作者: hkjake    時間: 2017-1-3 12:28

自己上google研究下xxcopy(free for personal use)
vsp 發表於 2016-12-31 10:04



    簡單且功能強大,但沒有圖型UI及英文介面,我決定好得閒先去研究點用,雖然好似打幾個COMMEND就用到
作者: pc1668    時間: 2017-1-3 12:45

I've been using freefilesync for years (always with verify on), never have a doubt.  The problem is most likely caused by some kind of hardware issue.

ps. Another excellent piece of freeware is the fastcopy.
作者: pc1668    時間: 2017-1-3 12:50

回覆  harryytm
Thanks Ching,呢個方法最簡單直接,唔駛用腦
同埋可以順便CHECK埋個DOCKING,咁多CHING都咁講估唔到DOCKING都會出事
hkjake 發表於 2017-1-3 12:25


Regarding docking, I would stay away from Orico as well as other 山寨貨。

For budget sensitive users, I would recommend Unitek (I am using its ext hdd enclosure and docking).

For more expensive option, we may go for something like Icydock
作者: hkjake    時間: 2017-1-3 13:29

回覆 21# pc1668


    Orico好似好出名但又好多負評
朋友用兩個Orico拖板都壞左,但港行見Orico好多其他牌子相對比較少
作者: hhstacy    時間: 2017-1-3 13:35

提示: 作者被禁止或刪除 內容自動屏蔽
作者: hhstacy    時間: 2017-1-3 13:37

提示: 作者被禁止或刪除 內容自動屏蔽
作者: hhstacy    時間: 2017-1-3 13:38

提示: 作者被禁止或刪除 內容自動屏蔽
作者: polarhei    時間: 2017-1-3 14:08

要驗, 你應該用SHA256而唔係MD5.

7-ZIP新版已經做到. 當然, 更子細資訊,快速處理甚至快速處理重覆檔案,要動用TREESIZE確保冇事.
作者: wunit    時間: 2017-1-3 14:13

買了USB DOCKING加3.5硬盤打算做一式兩份offline backup,主要是備份相片及 Word/Excel文件。
利用Freefile ...
hkjake 發表於 2016-12-30 16:21


"間中會發現其中一份相片變半綠或出現「Windows無法檢視照片檔案」"

要留意你個目的地Folder有冇野做緊縮圖
最常見係如果係copy的program同你做緊block level write, 但係你(explorer)又在同一時間做file level read就會中斷左個寫入
作者: hhstacy    時間: 2017-1-3 14:36

提示: 作者被禁止或刪除 內容自動屏蔽
作者: harryytm    時間: 2017-1-3 16:37

Regarding docking, I would stay away from Orico as well as other 山寨貨。

For budget sensitive us ...
pc1668 發表於 2017-1-3 12:50

Orico is not so bad in my experience, but you have to find a replacement power supply, because the quality of the power supply bundled is not so good.
作者: harryytm    時間: 2017-1-3 18:20

md5 good enough for error in trsnsfer.

sha256 fir secutiry
hhstacy 發表於 2017-1-3 14:36

HashCheck有CRC-32, MD5, SHA-1, SHA-256, SHA-512, SHA3-256, SHA3-512任選。
作者: wongtony    時間: 2017-1-3 18:29

喺GlobalSettings.xml入面將VerifyCopiedFiles Enabled改成True,FreeFileSync就會喺複制檔案嘅時候檢查埋 ...
harryytm 發表於 2016-12-31 15:54

This is useful, thank you.

via HKEPC Reader for Android
作者: java2    時間: 2017-1-3 23:02

我懷疑係HDD 或docking 問題

買了USB DOCKING加3.5硬盤打算做一式兩份offline backup,主要是備份相片及 Word/Excel文件。
利用Freefile ...
hkjake 發表於 2016-12-30 16:21

作者: pc1668    時間: 2017-1-4 12:54

回覆  pc1668
Orico好似好出名但又好多負評
朋友用兩個Orico拖板都壞左,但港行見Orico好多其他牌子相對比較少
hkjake 發表於 2017-1-3 13:29


my two cents, stay away from orico
作者: pc1668    時間: 2017-1-4 13:02

本帖最後由 pc1668 於 2017-1-4 13:11 編輯
Orico is not so bad in my experience, but you have to find a replacement power supply, because the quality of the power supply bundled is not so good.
harryytm 發表於 2017-1-3 16:37


Yes, the power supply is rubbish. I had an orico 2-bay ext hdd enclosure with the power supply "短路及輕微爆炸" on day 1.  Exchanged for another power supply thereafter.  Then 3 months later, the internal fan was died.   Brought the unit to SSP orico shop for repair (no same day repair service, have to go there twice!).   Then the fan was died again in a few months.  I am living in HK side, it was a waste of time and transportation cost.  As such, I gave up the unit!  And I will stay away from this brand forever.
作者: hoho1986    時間: 2017-1-4 18:14

回覆 34# pc1668
通常第一批貨QC好D,而且牛真係要換。
換左牛so far無咩問題,用緊1bay同2bays
作者: funfunfunfunfun    時間: 2017-1-4 20:33

Orico I am using 3 each 5 bays boxes, for over 1 year, so far so good.





歡迎光臨 電腦領域 HKEPC Hardware (https://www.hkepc.com/forum/) Powered by Discuz! 7.2