如何使用Golang实现多文件下载器_并发下载和进度显示

Go语言可用goroutine+channel实现并发下载，通过http.Client设超时、限流控制并发数、ProgressWriter实时更新进度、Downloader封装任务管理，并支持断点续传、自动建目录、SHA256校验及termenv/pb/v3美化终端输出。

并发下载多个文件

Go 语言原生支持并发，用 goroutine + channel 即可轻松实现多文件并行下载。核心思路是：为每个文件启动一个 goroutine 执行 HTTP GET 请求，把下载结果（成功/失败、文件名、耗时等）通过 channel 汇总到主 goroutine。

关键点：

• 使用 http.Client 并设置合理的超时（如 Timeout: 30 * time.Second），避免单个卡死拖垮整体
• 限制并发数（例如最多 5 个同时下载），避免打爆目标服务器或本地资源，可用带缓冲的 channel 或 semaphore 模拟信号量
• 每个 goroutine 独立处理自己的响应体（resp.Body），记得调用 defer resp.Body.Close()

边下载边实时显示进度

HTTP 响应头中通常包含 Content-Length，可据此预估总大小；配合读取响应体时的累计字节数，就能算出当前进度百分比。Go 中推荐用 io.Copy 配合自定义的 io.Writer（实现 Write 方法），在每次写入时更新计数器并触发进度回调。

简单做法示例：

• 定义结构体 ProgressWriter{Total int64, Written int64, OnProgress func(int64, int64)}
• 重写 Write(p []byte) (n int, err error)，累加 Written += int64(len(p))，再调用 OnProgress(Written, Total)
• 下载时： io.Copy(progressWriter, resp.Body)

终端显示可用 \r 回车不换行刷新同一行，例如：fmt.Printf("\r%s: %d/%d (%.1f%%)", filename, written, total, float64(written)*100/float64(total))

整合下载任务与状态管理

建议封装一个 Downloader 类型，持有并发控制、任务队列、进度汇总等逻辑。每个下载任务用结构体表示，含 URL、保存路径、是否完成、错误信息等字段。

常用增强项：

• 支持断点续传：检查本地文件是否存在且长度匹配 Content-Length，若匹配则跳过；否则用 Range 请求头继续下载（需服务端支持）
• 自动创建目录：用 os.MkdirAll(filepath.Dir(dest), 0755) 确保路径存在
• 统一错误处理：网络错误、磁盘满、权限不足等分类记录，不影响其他任务
• 下载完成后校验 SHA256（如果服务端提供 ETag 或额外提供 checksum）

终端界面友好提示

纯命令行下，可用 github.com/muesli/termenv 或 github.com/cheggaaa/pb/v3 实现带颜色、动态进度条的输出。后者更轻量，支持多任务并行条形图：

• 初始化 pb.Full.Start()，每任务创建一个 pb.ProgressBar，设置 Total 和 SetUnits(pb.U_BYTES)
• 将 progressBar.NewProxyReader(resp.Body) 作为 io.Reader 传给 io.Copy
• 所有进度条会自动对齐刷新，视觉清晰

无需 GUI，也能做出专业级的命令行下载体验。