最近想搞个爬虫爬点东西, 目前 Python 那个框架最好用呢

@Cy86 请问一下，发起请求能跑满上行带宽的吗？用 aiohttp 单进程跑，好像也只有几 M 上行

@Cy86 #18 有没有处理过网页请求指纹加密的处理？比如京东的价格保护，以前直接访问 url ，然后自己浏览器登录后 cookie 保存，然后提交每天跑就行了，现在不行了，他有个 t 的时间戳，超过一定时间比如 10 小时后就无效了，必须用新的时间戳加上本机指纹数据形成一个 h5st 的数据包作为 form 表单数据才行，难道要自己破解他的加密算法？

对于防爬虫的网站，我发现最后只能用 seliunium 模拟浏览器访问了，就是效率太差，但其他一概都搞不定。。。。

@godall https://github.com/seadfeng/headless-browser-clusters

最早用无头，感觉确实效率很低， 后面再次尝试用，其实没那么糟糕；碰到硬茬逆向搞不定能有什么办法