某鱼已经关掉了网页的访问,基于网页访问的采集一下子全乱套了。
但是方案还是有的,那就是从 app 入手,目前从基于 app 的方式入手,已经完成了带关键字的采集,界面上看得到的能采到,看不到的一些,只要 api 里有的,也都有。
协议是 spdy 的,也不是某宝原创,多家在用。
x-sign 就比较复杂了,不过没关系。有的是办法。
接下来做一些自动化提升效率,通过切换代理,切换帐号来 anti 服务器挤爆啦之类的就行了。
本文分享了某鱼平台关闭网页访问后,如何转向APP端进行数据采集的实践经验。介绍了采集过程中使用的SPDY协议及x-sign签名处理方法,并探讨了自动化采集流程的实现方式。
某鱼已经关掉了网页的访问,基于网页访问的采集一下子全乱套了。
但是方案还是有的,那就是从 app 入手,目前从基于 app 的方式入手,已经完成了带关键字的采集,界面上看得到的能采到,看不到的一些,只要 api 里有的,也都有。
协议是 spdy 的,也不是某宝原创,多家在用。
x-sign 就比较复杂了,不过没关系。有的是办法。
接下来做一些自动化提升效率,通过切换代理,切换帐号来 anti 服务器挤爆啦之类的就行了。

被折叠的 条评论
为什么被折叠?