请教使用 scrapy 爬取豆瓣读书的时候,无法多页面爬取的解决办法

2025-04-10 09:19:44
推荐回答(1个)
回答1:

scrapy在爬网页的时候是自动采用多线程的。 scrapy基于twisted异步IO框架,downloader是多线程的。