在微博搜索采集时，默认情况下只显示当前页数据。如果搜索的关键词是热词，当前页数据的时间范围可能只有三五分钟。所以，如果要把数据采集全，则必须登录。 在大批量采集时，必须使用账号构建cookie池，并根据cookie有效期实时更新已过期的cooki...

最近写了几十篇文章，发现也就爬虫系列之Pyppeteer：比selenium更高效的爬虫界的新神器阅读数还可以，看来大家对Pyppeteer还是比较感兴趣啊， 今天就把先前使用中整理的常用方法发出来，供大家参考一下。 import asyncio...