Question

如何处理python爬虫中的异步加载

Answer 1

正常使用scrapy或goose等模块时加载的爬虫本身就是异步的。
就算你多只爬虫“同时”启动,“同时”只是对于你人眼睛而言 与远端也是异步的。