之前发了个帖子,内容是统计藏宝阁寄售物品总价值是15.85亿,后来重新测试发现西祠代理的ip可用性太差,导致后面很多数据爬取都失败了,重新改了下逻辑,做了数据校验并调节了请求频率,发现和之前的数据出入很大,由于没钱搞付费代理,所以暂时只跑了2008这个区的数据,之前的数据是4582_5360,新的结果是3_7859_9144,相差了大概8.2倍,以此推算整个藏宝阁寄售总量已经达到了130亿,确实超百亿了。
之前有点不严谨,没有做review,所以之前的帖子删掉了,另外之前帖子有同学想知道流水或者说成交量,这个需要用大量代理ip,每半小时左右扫全量然后去校验物品的售卖状态字段,由于不利己我就不去做这个事了。
之前有点不严谨,没有做review,所以之前的帖子删掉了,另外之前帖子有同学想知道流水或者说成交量,这个需要用大量代理ip,每半小时左右扫全量然后去校验物品的售卖状态字段,由于不利己我就不去做这个事了。