最近用了各种爬虫, 开源自建的 Crawl4AI / CrawlLee 服务用过 Firecrawl / Jina Reader / Cloudflare新出的 crawl 发现最方便实惠便宜的还是 Jina Reader,没有订阅,免费额度大,后面一直是按需付费,爬各种内容也稳定,尤其是 X 的帖子爬的效果也不错。别的感觉都一般,不稳定或者根本就被block,当然除了 Apify,但是太贵了。 自建的话效果最好的就是 Crawl4AI 不知道大家觉得哪个爬虫效果大家最喜欢?可以讨论一下