加入收藏 | 设为首页 | 会员中心 | 我要投稿 财气旺网 - 海宁网 (https://www.hainingwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 大数据 > 正文

【大数据概论】大数据开发与大数据分析有什么不同吗?

发布时间:2022-10-21 11:13:55 所属栏目:大数据 来源:
导读:  大数据和股票方面恰巧有一定的了解,试着做一个回答

  从此前市场数据来看,用大数据做股票预测是有一定有效性的,而且也能够带来一定的超额回报。

  不过,从金融市场有一些自己的特性,所以大数据
  大数据和股票方面恰巧有一定的了解,试着做一个回答
 
  从此前市场数据来看,用大数据做股票预测是有一定有效性的,而且也能够带来一定的超额回报。
 
  不过,从金融市场有一些自己的特性,所以大数据对股票形成有效预测也有一些需要解决的问题
 
  1.金融数据的高噪音:真实的信息被淹没在噪音之中,如果不对噪音进行处理,很难得到有效信息
 
  2.金融市场的弱平稳性:金融市场本身是弱平稳的。对于市场数据的分析预测如果一直采用同样的模型,很难长期有效。
 
  所以,如果要有大数据的方式尝试对股票市场做出有一定准确度的预测,就需要有一个从大数据中分离有效信息,并能够根据金融市场当下状况进行实施调整的模型。
 
  而对于整个数据的分析预测来讲,大致也需要以下的几个步骤:
 
  首先需要对金融数据进行降噪,尽可能减少噪音的影响。简单的话这里可能会采用一些滤波的方法,比如均线、kalman滤波等等
 
  滤波之后的数据本身可能还不能与需要预测得数据形成较好的对应关系。而且大数据的情况下,可能本身的数据就是几百上千维,直接处理对于计算机来讲也是不现实的。所以这里还需要进行降维。简单做一下的话可以采用很多线性的方法,比如pca等等。或者一些非线性的比如神经网络深度学习之类的也可以用到这里
 
  之后可以尝试做一下建模,这个就要看具体打算预测什么数据。
 
  最后考虑到金融市场本身的弱平稳性,就需要根据最新数据的反馈对模型进行实时调整。这里可以采用一些统计学的方法,当然机器学习方面的一些算法也可以都加进来
 
  不过要真正实现用大数据对股票市场进行有效的预测并不简单,在无套利的假设下,如果想获得额外的利润,肯定是需要在某些方面有过人之处。而具体到向通过大数据做股市的预测方面,具体就是下边的几个能力:
 
  对于绝大多数参与者而言,所拥有的数据仅仅是市场公开数据,很难在数据这一环占据优势。但是如果是一些拥有大数据资源的参与者,就可以在这一层超过市场上的平均水准。
 
  拥有数据只是有了最基本的材料大数据开发,但是最终结果能否做好还需要看之后数据处理的活做得怎么样。这方面需要好的算法,从原始数据中提取有价值的信息。这里可以参考一家著名的公司:文艺复兴科技,他们的早期团队在最大熵方面方面有很强的学术背景,可以猜测他们的处理方式与之有关。除了这个例子之外,在大数据做金融数据预测方面,也就是通过什么样的算法能够更快更好提取有价值信息乃至做出决策。
 
  最后的一环就是算力。如果交易对手也有数据,也有好的算法,对于市场上的某个交易机会,剩下的就是谁先算出来以及谁先成交的问题。对于用大数据方面预测金融数据,如果大家都是同等数据、同等算法,那么就是看谁能更早拿到结果。交易机会稍纵即逝,最先完成的交易一般而言会容易拿到更好的价格,而如果交易机会结束前都没有算出来,那这次的计算结果也就没有太多价值了。
 

(编辑:财气旺网 - 海宁网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!