期货市场监控后台管理系统

臭大佬 2021-04-24 11:18:16 3125
Python 
简介 证券期货大数据分析系统是一个后台管理系统,基于laravel-wjfcms,加入了一些期货统计和分析的功能。

介绍

之前写过一篇《中国期货市场监控中心爬虫》。在那篇文章中,介绍了爬取中国期货市场数据的相关技术,然后很多小伙伴加我,向我咨询相关的问题。

在咨询的小伙伴中,有根据文章操作,跑起来的,特意来感谢的;有尝试过,但没有跑起来的;有不是技术出生,但是对这个系统很感兴趣的…..

对于小伙伴们比较关心的几个问题,我这边给予解答,请根据自己的情况,针对性的查看。

问题

问题一 这个脚本真的可以自动化爬取数据吗?
答:

朋友公司做期货相关业务,有这方面需求,然后找到我们团队开发了这么一个系统,系统运行不到一年,项目还是试水阶段,客户不算很多,里面期货监控中心账号一百来个吧,运行良好。二期功能正在沟通开发中….所以,有实际线上案例了,而且也有动手能力强的老哥,自己搭建跑起来的,不用担心系统跑不起来的。

问题二 对这个脚本很感兴趣,但是我要的功能和现在这个差别比较大,能订制开发吗?
答:

上篇文章是在给客户订制开发的基础上做展示的,所以,可能您需要的功能和爬取内容有所不同,比如在咨询的小伙伴中,有些是要爬取月分析的,有些是要逐日冲市的…..其实,这些都可以订制开发的,如果有需要,可以私信联系我。

问题三 爬取的时候验证码真的可以验证过吗?是需要花钱买验证技术吗?
答:

有部分小伙伴也有看相关的程序脚本,或者是自己有尝试过,很多是都卡在识别验证码的步骤,中国期货市场监控中心的验证码系统混淆效果还是可以的,用OCR识别率极低,基本是验证不了的,刚开始做这系统的时候,验证码也让我头疼了很久,后来多研究了一些第三方API,发现百度家的效果还是可以的,成功率可以达到80%,程序里面有刷验证码的步骤,基本上5次以内就可以识别成功,所以,验证码识别问题已经解决,可以放心。

至于第三方接口收费方面,百度API每月有固定的免费请求次数,记得好像是有1千次左右,一般情况是够用的,如果不够的话,购买也是不贵的,就跟短信服务费差不多。

非常感谢大家的关注和支持,希望文章对大家有所帮助。
可能上一篇比较偏向于技术,对于一些玩期货的非程序员来说,不是那么友好。
这一篇呢,给大家介绍一下我之前开发的证券期货大数据分析系统。

代码地址:https://gitee.com/Galloping-Vijay/qihuo.git

证券期货大数据分析系统是一个后台管理系统,基于laravel-wjfcms,安装和配置和laravel-wjfcms基本一致,只是在功能上有所修改,删掉了用不到的功能外,还加入了一些期货统计和分析的功能。如果安装配置有困难的话,可以咨询我帮忙安装和配置。

这个系统是把脚本爬取的数据进行汇总、统计展示等,可视化的操作,让不懂代码的小白操作起来也可以得心应手。废话不多说,先来看看功能。

功能

下面我们来具体介绍一下相应的功能。

这是登录界面,这是之前根据客户的要求做的UI,其实我自己不是很喜欢。

用户登录后,根据不同权限展示不同的菜单,这里面主要介绍几个期货相关核心功能。

期货监控中心账号管理

期货监控中心账号管理,这里可以录入期货监控中心的账号,程序会读取里面的账号,自动登录爬取相应的数据到数据库中。也就是说,只要您把账号录入到系统中,程序就可以把你想要的数据都抓取下来,并进行统一的管理和对比,再也不需要一个个登录去下载excel了。

在添加期货监控中心账号的时候,这里可以根据登录账号分配期货监控中心账号,也就是说,除了超级管理员,别的账号登录,只能看到自己账号下绑定的期货账号的相关数据,上个客户他们公司是把这个系统作为待运营平台,现在运营得还行,偶尔还会找我维护,里面的账号有100来个了,所以,这个系统想像空间还是挺大的。

交易所管理

交易所管理菜单下,主要有两个菜单,交易所和品种,这两个菜单的数据,一方面可以从爬取的数据中来,一方面也可以手动excel导入,还可以手动添加。也就是说,在爬取的时候,如果爬取数据中的品种或者交易所平台没有录入,程序会自动创建,除此之外,还能excel导入完善数据。

交易数据

交易数据菜单,里面有爬取的逐日盯市数据,还有期货数据的汇总,如收盘价、成交汇总、持仓汇总等。由于展示的这个系统是我临时搭建的,所以里面的数据会比较少,就只展示菜单啦。

统计分析

统计分析里面,是把爬取到的数据进行统计分析,里面统计可以根据账号、时间筛选查询出 交易手数、当前净值、最高净值、最低净值、最大撤回、累计出入金、累计收益等等各种数据的计算。

处理计算统计值外,还有各种对比图表,有了这些数据,有利于投资者分析和判断未来趋势,以及发现之前的一些问题,还是很有价值的。

净值与风险仓位图表

收盘价走势图

品种交易统计图

品种交易比例图

卖平买平单品类细分图

订制开发

上面展示的内容,主要是上一位客户的需求,其实整套程序最核心的东西,还是自动爬取数据,至于您要如何展示和分析,都可以根据需求来做,如果您有一定的开发基础,这套系统二开还是比较友好的,如果您想根据自己的需求,定制化开发,我们团队有类似的经验,可以为您提供定制化功能。让数据在您手中更有意义。