百度指数批量抓取导出提取的工具开发历程

百度指数批量抓取导出提取的工具开发历程

2024-11-10 17:49

http://www.datasharehome.com/bdindex/order/

百度指数批量抓取导出提取的工具开发历程

http://www.datasharehome.com/bdindex_stock/stock_record/?type=stockname http://www.datasharehome.com/bdindex_stock/stock_record/?type=stockcode

http://www.datasharehome.com/wbindex/order/

1.1 本地安装版 原理：主要根据百度指数以svg折线图显示，右侧有如下坐标轴，各指数是以值按照比例显示。所以可以根据各点的坐标和刻度，反算出各点代表值。

鉴于前面说的，每个点都要向百度服务器请求一次，所以百度指数经常出现不响应，或者错误。所以百度又进行了升级，这次是一个时间区间进行一次的数据传输，然后通过js加密数据方式，改变了一次已请求的方式，对其服务器的请求大为降低。同时也不再采用图片化的方式，整体来说抓取的难度应该有所下降。