介绍

之前写过一篇《中国期货市场监控中心爬虫》。在那篇文章中，介绍了爬取中国期货市场数据的相关技术，然后很多小伙伴加我，向我咨询相关的问题。

在咨询的小伙伴中，有根据文章操作，跑起来的，特意来感谢的；有尝试过，但没有跑起来的；有不是技术出生，但是对这个系统很感兴趣的…..

对于小伙伴们比较关心的几个问题，我这边给予解答，请根据自己的情况，针对性的查看。

问题

问题一 这个脚本真的可以自动化爬取数据吗?

答：

朋友公司做期货相关业务，有这方面需求，然后找到我们团队开发了这么一个系统，系统运行不到一年，项目还是试水阶段，客户不算很多，里面期货监控中心账号一百来个吧，运行良好。二期功能正在沟通开发中….所以，有实际线上案例了，而且也有动手能力强的老哥，自己搭建跑起来的，不用担心系统跑不起来的。

问题二 对这个脚本很感兴趣，但是我要的功能和现在这个差别比较大，能订制开发吗？

答：

上篇文章是在给客户订制开发的基础上做展示的，所以，可能您需要的功能和爬取内容有所不同，比如在咨询的小伙伴中，有些是要爬取月分析的，有些是要逐日冲市的…..其实，这些都可以订制开发的，如果有需要，可以私信联系我。

问题三 爬取的时候验证码真的可以验证过吗？是需要花钱买验证技术吗？

答：

有部分小伙伴也有看相关的程序脚本，或者是自己有尝试过，很多是都卡在识别验证码的步骤，中国期货市场监控中心的验证码系统混淆效果还是可以的，用OCR识别率极低，基本是验证不了的，刚开始做这系统的时候，验证码也让我头疼了很久，后来多研究了一些第三方API，发现百度家的效果还是可以的，成功率可以达到80%，程序里面有刷验证码的步骤，基本上5次以内就可以识别成功，所以，验证码识别问题已经解决，可以放心。

至于第三方接口收费方面，百度API每月有固定的免费请求次数，记得好像是有1千次左右，一般情况是够用的，如果不够的话，购买也是不贵的，就跟短信服务费差不多。

非常感谢大家的关注和支持，希望文章对大家有所帮助。
可能上一篇比较偏向于技术，对于一些玩期货的非程序员来说，不是那么友好。
这一篇呢，给大家介绍一下我之前开发的证券期货大数据分析系统。

代码地址：https://gitee.com/Galloping-Vijay/qihuo.git

证券期货大数据分析系统是一个后台管理系统，基于laravel-wjfcms，安装和配置和laravel-wjfcms基本一致，只是在功能上有所修改，删掉了用不到的功能外，还加入了一些期货统计和分析的功能。如果安装配置有困难的话，可以咨询我帮忙安装和配置。

这个系统是把脚本爬取的数据进行汇总、统计展示等，可视化的操作，让不懂代码的小白操作起来也可以得心应手。废话不多说，先来看看功能。

功能

下面我们来具体介绍一下相应的功能。

这是登录界面，这是之前根据客户的要求做的UI,其实我自己不是很喜欢。

用户登录后，根据不同权限展示不同的菜单，这里面主要介绍几个期货相关核心功能。

期货监控中心账号管理

期货监控中心账号管理，这里可以录入期货监控中心的账号，程序会读取里面的账号，自动登录爬取相应的数据到数据库中。也就是说，只要您把账号录入到系统中，程序就可以把你想要的数据都抓取下来，并进行统一的管理和对比，再也不需要一个个登录去下载excel了。

在添加期货监控中心账号的时候，这里可以根据登录账号分配期货监控中心账号，也就是说，除了超级管理员，别的账号登录，只能看到自己账号下绑定的期货账号的相关数据，上个客户他们公司是把这个系统作为待运营平台，现在运营得还行，偶尔还会找我维护，里面的账号有100来个了，所以，这个系统想像空间还是挺大的。

交易所管理

交易所管理菜单下，主要有两个菜单，交易所和品种，这两个菜单的数据，一方面可以从爬取的数据中来，一方面也可以手动excel导入，还可以手动添加。也就是说，在爬取的时候，如果爬取数据中的品种或者交易所平台没有录入，程序会自动创建，除此之外，还能excel导入完善数据。

交易数据

交易数据菜单，里面有爬取的逐日盯市数据，还有期货数据的汇总，如收盘价、成交汇总、持仓汇总等。由于展示的这个系统是我临时搭建的，所以里面的数据会比较少，就只展示菜单啦。

统计分析

统计分析里面，是把爬取到的数据进行统计分析，里面统计可以根据账号、时间筛选查询出 交易手数、当前净值、最高净值、最低净值、最大撤回、累计出入金、累计收益等等各种数据的计算。

处理计算统计值外，还有各种对比图表，有了这些数据，有利于投资者分析和判断未来趋势，以及发现之前的一些问题，还是很有价值的。

净值与风险仓位图表

收盘价走势图

品种交易统计图

品种交易比例图

卖平买平单品类细分图

订制开发

上面展示的内容，主要是上一位客户的需求，其实整套程序最核心的东西，还是自动爬取数据，至于您要如何展示和分析，都可以根据需求来做，如果您有一定的开发基础，这套系统二开还是比较友好的，如果您想根据自己的需求，定制化开发，我们团队有类似的经验，可以为您提供定制化功能。让数据在您手中更有意义。