登录

AWS 开源 File Mover Express:大文件传 S3 自动调并行,断开桌面也能接着传

21
  • Showfom
    UID 1管理员楼主博主

    亚马逊云科技发布开源工具 File Mover Express,用于在本地系统和 Amazon S3 之间搬运大文件,采用 Apache 2.0 许可,支持 macOS、Windows 和 Linux,InfoQ 中文介绍了它的设计。

    核心是一个守护进程式传输引擎,可以跑在工作站、机房服务器或 EC2 上,与桌面会话解耦,用户断开后传输照样继续;前端提供拖放式图形界面和可写脚本的命令行,还能监控文件夹自动上传。传输时把文件切块走多部分上传,自动调优模式会按连接情况动态调整并行流数量和块大小,并支持重试、文件级暂停与恢复。

    安全方面,传输全程走 HTTPS,存储桶访问由 IAM 按最小权限控制,支持 OIDC 单点登录;校验和在后台计算并本地缓存,可选 MD5、XXHash、XXHash64 和 XXH3。引擎用 Go 编写,界面用 TypeScript 和 Angular,还能通过 MCP 接入 AI 助手。

    这款工具主要瞄准每天要把数 TB 素材送上云的媒体团队,对原本依赖商业传输软件的团队来说,多了一个免授权费的选择。

    来源:InfoQ 中文

    原文链接:File Mover Express:亚马逊云科技发布用于 S3 文件传输的开源工具

    标题和摘要由 AI 根据原文生成,可能有误,以原文为准。

  • 收藏支持反对

1 条回复

  • Lvan
    UID 1112
    #1

    断开桌面会话传输还继续跑,这点最戳我,之前传大文件最怕手一抖关了窗口全白传。

    自动调并行加断点续传,再配个开源免授权费,每天往 S3 搬几 TB 素材的媒体团队估计要笑出声了,商业传输软件那边估计正在开会。

发表回复