飞污熊小站

分享Python/Java/Go/Rust编程技术，AI创作爱好者

每天15分钟玩转Scrapy - 性能调优

XiongNeng 发布于 2026-09-12 收录于 Python

性能这件事，我的经验是可以量出来的部分比想象中多。

XiongNeng 发布于 2026-09-12 收录于 Python

这一篇讲对方不想让你爬的时候，会发生什么，以及你能做什么。

XiongNeng 发布于 2026-09-12 收录于 Python

前面几篇取的都是文字。这一篇换个东西取，文件。

XiongNeng 发布于 2026-09-12 收录于 Python

前面那篇讲的是怎么让服务器相信你是本人。这一篇讲另一件事，服务器给回来的东西不全。

XiongNeng 发布于 2026-09-12 收录于 Python

前面三篇把数据怎么取、怎么存讲完了。但抓的都是那种打开就能看的页面。

XiongNeng 发布于 2026-09-12 收录于 Python

上一篇我们抓到了 50 位作家的档案，parse 里写的是 yield {"name": ..., "birthdate": ...}。