跳至主要内容

Number of Equality Checkers — 在 RcloneView 中為慢速後端調整同步比較

· 閱讀時間約 5 分鐘
Kai
Junior Engineer

在複製任何內容之前,同步必須先判斷哪些檔案已經一致。checker 的數量決定了這一步對儲存空間施加多大的壓力。

RcloneView 中的每個 Sync 工作都從比較來源與目的地檔案開始,以確定真正需要傳輸的內容。這項工作由 equality checker 完成,同步精靈的 Step 2 讓你設定並行執行的數量。預設值 8 適合大多數雲端服務商,但小型 SFTP 伺服器、WebDAV 共用或 API 限制嚴格的服務商,往往在較低的值下表現更好。

RcloneView 應用程式預覽

在同一處管理與同步所有雲端

RcloneView 是 rclone 的跨平台 GUI。透過清爽的視覺化介面比較資料夾、傳輸或同步檔案,並自動化多雲工作流程。

  • 一鍵作業:複製 · 同步 · 比較
  • 排程器與歷史記錄,打造可靠的自動化
  • 支援 Google Drive、OneDrive、Dropbox、S3、WebDAV、SFTP 等
WindowsmacOSLinux
免費開始使用 →

核心功能免費。Plus 提供自動化功能。

Equality Checker 的作用​

checker 會檢視兩側的檔案並判斷它們是否相同。預設情況下,比較依據大小與修改時間。如果在同一步驟中勾選 Enable checksum,則改為依雜湊值與大小比較檔案——這更嚴格,但需要為每個檔案向後端請求雜湊值。

Opening a sync job in RcloneView to adjust advanced settings

checker 與 Number of file transfers 是分開的,後者控制同時複製的檔案數量。同步 200,000 個小檔案且大多數未變更時,檢查所花的時間遠多於傳輸,因此 checker 數量可能比傳輸數量更重要。

何時降低 Checker 數量​

RcloneView 的建議是:對慢速後端使用 4 或更少。典型情況:

  • 規格一般的伺服器上的 SFTP 或 FTP。 並行檢查代表更多的同時連線,小型 VPS 或較舊的 NAS 可能會拒絕或限制額外的工作階段。
  • 對中繼資料請求回應緩慢的 WebDAV 共用。
  • 請求限制嚴格的雲端服務商,突發的並行請求會觸發速率限制錯誤與重試。

降低 checker 是以原始並行度換取更穩定的進度。如果日誌在比較階段反覆出現重試或連線錯誤,請先降到 4,再降到 2,然後重新執行。

Monitoring sync progress and speed in the RcloneView Transferring tab

何時預設值就足夠​

Amazon S3、Wasabi 或 Cloudflare R2 等 S3 相容物件儲存通常可以毫無問題地處理 8 個 checker,本機磁碟或高速區域網路 NAS 也很少需要調整。RcloneView 可在 Windows、macOS 與 Linux 上從一個視窗掛載並同步 90+ 服務商,因此同一台機器上的不同工作需要不同的 checker 值是很常見的:S3 工作保持預設,只降低 SFTP 工作。

用 Dry Run 與 Job History 衡量變化​

一次只變更一個設定。先執行 Dry Run 確認工作範圍,然後執行同步並開啟 Job History,它會記錄每次執行的 Time Spent、Status 與檔案數。比較同一工作在不同 checker 值下的兩次執行,就能看出變更是否有幫助。如果重試設定(Retry entire sync if fails,預設 3)不斷被觸發,這也表示後端需要更少的並行請求。

Comparing sync run durations in RcloneView Job History after changing the checker count

開始使用​

  1. 從 rcloneview.com 下載 RcloneView。
  2. 開啟 Job Manager,編輯以慢速遠端為目標的同步工作。
  3. 在 Step 2 中將 Number of equality checkers 設為 4,並決定是否需要 Enable checksum。
  4. 執行工作,然後在 Job History 中將 Time Spent 與狀態和先前的執行進行比較。

只需幾分鐘的調整,就能把卡在比較階段的同步變成穩定完成的同步。


相關指南:

支援的雲端服務商

Local Files
WebDAV
FTP
SFTP
HTTP
SMB / CIFS
Google Drive
Google Photos
Google Cloud Storage
OneDrive
Dropbox
Box
MS Azure Blob
MS File Storage
S3 Compatible
Amazon S3
pCloud
Wasabi
Mega
Backblaze B2
Cloudflare R2
Alibaba OSS
Ceph
Swift (OpenStack)
IBM Cloud Object Storage
Oracle Cloud Object Storage
IDrive e2
MinIO
Storj
DigitalOcean Spaces