Blog

标签:动态列表

当前标签共有 2 篇文章。

技术指南2026年10月28日4 分钟阅读亿牛云技术团队

Playwright 动态列表采集:网络响应、滚动加载与游标分页

无限滚动页面不一定把所有记录同时留在 DOM 中。滚动很久以后再一次性读取节点,可能只拿到最后一个窗口;看到条数不变,也可能是网络失败,而不是到了末尾。 本文提供一个完整的浏览器教学页面和三段分页响应。我们在动作前注册响应等待,逐段收集数据,用 nextcursor 判断结束,按商品 ID 合并。材料包含一条跨页重复,

技术指南2026年10月28日5 分钟阅读亿牛云技术团队

Pydoll 完整教程:动态页面查询、分页与结果采集

在动态页面里,点击完成、网络空闲和结果更新是三个不同状态。只在每次点击后睡两秒,任务可能在快页面浪费时间,在慢页面读到旧数据。 本文用 Pydoll 3 读取 Quotes to Scrape 的动态列表,选择 life 标签,再处理最多两页结果。每条名言保留作者和来源,输出 CSV;失败时尝试保存当前页面截图,帮助定