Indi

Rust小项目: 写一个简单的网页爬虫

又耳笔记 youerning.top 2024/01/20

本文主要是对之前 reqwest 库的一个简单的扩展，通过写一个简单的爬虫项目来练习练习Rust, 爬虫有用也有趣，但是不要给目标网站造成过大的压力，否则可能会触犯法律，切记切记。…

讨论

还没有评论，来说第一句吧。

又耳笔记的其他文章

收录 1,531 个博客
本周 133 位博主更新
24 小时内 46 篇

分类

随机逛一个博客 →

Indi 收录中文独立博客，

每小时检查一次 RSS。

30 天内有更新的博客每小时检查一次，一年内有更新的每 3 小时，更久没更新的每 12 小时。抓取失败时会先照常重试，失败超过一天后逐步降低频率（12 小时、3 天、7 天）；连续 7 天抓不到标记为疑似失效，超过 90 天标记为已失效、每 90 天才检查一次。恢复后自动回到正常节奏。RSS 没有变化时只发一个很小的请求，不会重复下载。

欢迎在 GitHub 上提交你的博客。