干货全拿走 您所在的位置:网站首页 股票实时交易数据获取 干货全拿走

干货全拿走

2024-06-24 02:59| 来源: 网络整理| 查看: 265

一、 前言

 

二、 实现思路

三、 核心代码

四、 注意事项

一、前言

大数据时代,数据分析的价值愈发凸显,数据对于金融市场亦如是。现在越来越多的金融机构和个人借助专业的软件去做数据分析和获取数据,但是显然对于普通人来说,一是学习门槛高,二是年费高。普通人可能做股票,根本不会分析也不会有数据支撑,极少数的人有自己的策略和理论,大多数人都成了韭菜。普通人接触最多的数据分析处理的工具就是EXCEL,而用excel去支撑普通人一般对于股票数据分析的需求,就是我做这个系列的初衷,也是将我原来自己用的一些东西分享出来,发挥更大的价值吧。自己有一部分是用excel做的网抓,另外一部分是算法和模型,这次分享的就是网抓股指数据的部分了。

Excel实现网页抓取(或者叫爬虫),实际上是依托的VBA语言,这个是以excel(或其余的office,如word,ppt等)为宿主的语言,脱离了excel就无法运行,但是其优点在于不需要额外安装什么软件和环境,直接用excel就可以运行,所以对于普通人非常方便友好。这也是我为什么用VBA的原因,虽然这个语言已经很老了,库也不丰富 ,能实现的功能远不如其余语言,但是很多人往往高估了自己对于功能的需求,我感觉对于普通人来说,可能真的用到的都只是基本的功能。

就网抓而言的话 ,Excel VBA可以实现在网站反爬虫机制不太高级的情况下的爬虫,简单地说,就是没有人机验证(图片识别、验证码识别等)的情况下。(一般请求头、javascript触发,IP地址反爬这几种还能处理,但是后两者对于VBA技术以及一些网抓衍生知识的要求很高,学习成本比较高)。所以,效率最高的网抓方案就是选择一个比较好抓的网页,而不是绞尽脑汁想用VBA去饶过他。说实话,绕过反爬虫的程序使用VBA来写的话,真的是现代社会钻木取火,它的上限摆在这,这种高级功能还不如用python。

二、实现思路

(1)找数据源。这个是最关键的一步,没有数据源一切都白扯。“巧妇难为无米之炊”。之前一直想下载股指方面的数据,感觉能提供股指历史数据的公开网站是不少,但是很多是需要登录验证,或者只能会员才能查看指定信息,能免登录直接用于VBA网抓的并不多。最后终于找到了一个&#x



【本文地址】

公司简介

联系我们

今日新闻

    推荐新闻

    专题文章
      CopyRight 2018-2019 实验室设备网 版权所有