技术指南2026年10月28日6 分钟阅读亿牛云技术团队Spider Rust 实战：构建站点页面与资源清单做文档迁移或站点盘点时，你需要的不只是一个 URL 集合，还需要知道每个地址返回什么状态、保存在哪个文件，以及页面引用了哪些资源。Spider 可以把页面结果以订阅方式交给 Rust 程序，边遍历边整理清单。 本文建立一轮最多二十页、深度受限的盘点，保存 HTML 与 JSONL，额外提取页面声明的图片、脚本和样式链接#Spider#Rust#站点遍历#流式处理阅读全文