寻找牛股

我们一直在努力

如何应用数据挖掘技术?

日期: 来源:爱扒股

在西蒙斯的交易活动过程中,复杂的统计技术比如数据挖掘等占据非常重要的地位。数据挖掘就是指从大量数据中提取有用信息和知识的技术。西蒙斯聘请了大量的IBM实验室机器翻译研究小组人员。大家都知道,数据挖掘在自然语言处理(包括机器翻译)领域具有很多成功的应用。该领域中的专家的专长表现在两个方面:对多种数据挖掘算法和海量数据的处理非常熟悉。而这两种技能的结合也正好符合投资领域的要求,有人质疑文艺复兴科技公司用语音识别技术去分析交易所的噪声信号,这完全是没有道理的。其实,语言就是交易员情绪的反应,语言揭示的信息最终依然表现为交易活动。更何况交易员可能言不由衷,然而交易数据却是客观的。既然交易活动能够从交易数据上观察到,还有必要去分析充满噪声以及欺骗性的语言信号吗?


如下就是西蒙斯数据挖掘技术的应用方法。

(1)遗传规划(GP)。遗传规划以及遗传算法都是进化算法中的一员。进化算法指的是根据达尔文进化思想发展起来的一系列算法,这里面非常重要的就是遗传算法。遗传算法运用染色体来表示问题的一个可行解。染色体运用一定长度的二进制或者十进制编码串来表示。父代染色体通过遗传操作如交叉和变异等形成子代染色体,经由一定代数的进化所获得的最优染色体也就是问题的最优解。遗传规划就是在遗传算法基础上而产生的一种技术。它不如遗传算法那样运用固定长度的染色体编码方式,而是使用树结构来表示解空间。遗传操作是在树结构上进行的。在证券交易领域中,遗传规划通常用以寻找最优交易规则的技术。比如,交易策略往往由入市规则和退场规则所组成。不管是入市规则还是退场规则都有很多的备选规则可用,比如,很多的技术交易策略都能够当作入市规则和退场规则。最大的问题就是如何找出两者的最优组合呢?这就要借助遗传规划技术。

(2)隐含马尔可夫模型(HMM)。隐含马尔可夫模型实际上就是一个数学模型,一直以来被当作是实现迅速、精确的语音识别系统的最成功的方法。复杂的语音识别问题就是通过隐含马尔可夫模型可以很简单地被表述和解决。隐含马尔可夫模到就是描述一个由状态序列以及信号序列组成的随机系统:投资者能够观察到信号,然而决定信号的状态序列却观察不到;同时状态序列就是一个马尔可夫过程。这则是隐含马尔可夫模型名字的由来。对于从信号序列中学习HMM的参数并且推测状态序列,很有名的鲍姆-威尔士算法和Viterbi算法能够运用。这两种算法是信息科学领域中非常有名的算法之一,在股票市场上获得非常广泛应用。比如说,如果股票价格的涨跌是由市场心理控制的。股票价格就是信号,市场心理则是观测不到的状态。股票价格和市场心理所组成的系统便构成了一个隐含马尔可夫模型。通过上面算法就能够通过股票价格来推断和预测市场心理。

特别指出的是,鲍姆-威尔士算法的发明人之一——里昂纳多·鲍姆曾经为西蒙斯开发过交易模型。鲍姆-威尔士算法,能够确定某种不可确知的变量出现的概率。从统计的角度来看,交易是能够套利的。西蒙斯当初运用鲍姆的算法。

(3)条件最大熵模型(CMEM)。最大嫡原理就是指在一定的约束条件之下,很可能出现的概率分布是熵最大的分布。条件最大嫡模型。是最大熵原理在分类问题中的运用。很多分类问题可以描述这些:估计目标类别x在一定上下文y中产生的概率,即为(|)xy。在证券分析当中,上下文往往会包括证券的历史交易信息,比如证券历史价格、成交量历史类别信息等,证券价格资料通常包含关于x与y的一些共同出现信息,然而由于关于y的信息往往总是比较稀少的,因此对于所有可能的(,)xy对,完全精确确定(|)pxy是做不到的。条件最大熵模型根据、与y的统计特征,估计熵最大的概率模型为(|)pxy。可以举一个例子来说明。交易者要预测明天股票价格的涨跌情况。从历史数据中就能够知道,有成千4HMM就是图模型中的一类。图模型在证券预测中获得大量的应用。

特别指出的是。求解条件最大熵模型的IIS算法的发明人之一就是德拉·皮耶特拉兄弟,他们曾经就职于西蒙斯的公司。

上面这三种模型在证券领域具有广泛的应用,然而它们都有替代品。隐含马尔可夫模型与条件最大熵模型均是贝叶斯网技术中的一员,遗传规划也能够用进化算法中的其他算法来代替。    

总的来说,证券领域为大量的数据挖掘算法提供了试验场。众所周知,生物信息学领域和自然语言领域都是数据挖掘技术具有广泛应用的领域。

聚合标签

早盘选股涨停板上市公司龙虎榜热点题材股市炼金术股市名家股票新闻股票学堂 涨停股预测股票涨跌停板涨停板买入法涨停板卖出法涨停十五招追涨停板技巧如何抓涨停伏击涨停战法伏击涨停十八法发现涨停的60个细节涨停板如何赚钱涨停绝杀九招如何选择涨停股捕捉连续个股涨停方法股市涨停密码图解股票涨停规律涨停10招七步分析法涨停板实战交易快速捕捉涨停股的技术要诀 李大霄最新股市评论冯矿伟新浪博客水皮股市最新言论严为民最新持股淘气天尊股市最新点评叶檀股市最新评论黄生看金融齐俊杰看财经巴菲特股票投资策略徐文明大盘点评蒋菲股市评论牛刀股市最新评论花荣股市最新观点杨德龙最新股市评论任泽平股市最新评论但斌最新持股洪榕股市最新消息金鼎论市徐小明股市点评荀玉根股市最新评论李立峰股市最新评论郭施亮股市最新观点黄智华股市最新评论钱启敏股市最新评论沙黾农股市最新评论展锋股市最新评论丁大卫新浪博客居锦斌新浪博客李正金新浪博客凯恩斯最新股市评论王亚伟持仓股票陈锐看盘叶荣添最新股市消息蔡钧毅最新股市消息魏宁海股市最新消息阿丁股市最新消息杨百万股海实战空空道人股市最新言论彼得林奇的成功投资wu2198股市即时分析索罗斯的金融逻辑钮文新股市最新言论时寒冰最新言论师晨冰推荐股票詹姆斯西蒙斯操盘术查理芒格的投资原则罗杰斯投资预言曹或均跟史玉柱学炒股段永平的80条炒股妙招格雷厄姆证券分析管清友新浪博客马红漫谈股市傅海棠傅海棠期货利弗莫尔操盘秘诀斯坦利克罗操盘术马光远最新谈楼市皮海洲谈股市石天方谈股市股市刀锋股市最新评论信哥实盘和众汇富安东尼波顿教你选股投资大师教你止损国际大师谈投资利维摩尔股票交易原则跟谢宏章学炒股普林格教你选股张中秦新浪博客水皮谈股市的规律李大霄投资战略约翰博格的投资智慧边风炜股评

热门文章

  • [涨停早知道]关键词:新基建、猪肉(2020/3/12)

  • 扒股君览宏观 ①国常会:抓紧出台普惠金融定向降准措施,额外加大对股份制银行降准力度。②两部门:支持建成一批年产值超过100亿元的优势特色产业集群。③发改委:进一步扩大鼓励外
  • [选股早知道]关键词:新基建、锂电池(2020/4/27)

  • 扒股君览宏观 ①央行、银保监会:统筹推进金融精准扶贫工作,落实好各项支持政策。②财政部、税务总局:普惠金融有关税收优惠政策实施期限延长四年。③农业农村部:立足抗灾夺丰收,
  • [选股早知道]关键词:锂电池、农业(2020/3/30)

  • 扒股君览宏观 ①国开行决定设立2500亿元专项贷款,加大对制造业支持力度,涉及集成电路、新能源汽车、5G与光通信、大飞机、新型显示等领域。②北向资金27日净流入34.14亿元。个
  • [涨停早知道]关键词:5G、滞涨(2020/3/9)

  • 扒股君览宏观 ①外汇局:1月银行结汇10067亿元人民币。②海关总署:中国1-2月贸易逆差70.9亿美元;预估顺差388.5亿美元。③工信部召开加快5G发展专题会。④交通部:将农民工返岗包
  • 【涨停预测】唐德影视等有望冲击涨停(名单)

  • 一、公告及信息 唐德影视:东阳市国有资产监督管理办公室将成为公司实控人 公司实控人吴宏亮与东阳市金融控股、东阳市金融控股的控股子公司东阳聚文影视文化投资签订了意

最新文章

  • [涨停早知道]关键词:检测、锂电池(2020/5/8)

  • 扒股君览宏观 ①今年在宏观政策方面因时因势还会推出新的举措,加大宏观政策调节力度。②财政部、国家知识产权局:扩大知识产权质押融资规模,推进知识产权证券化。③中证协:探索
  • 【涨停预测】华懋科技等有望冲击涨停(名单)

  • 一、公告及信息 华懋科技:公司控股权拟发生变更 股票复牌 公司控股股东金威国际与华为投资签署转让股份框架协议,交易完成后,华为投资将持有公司29.35%的股权并
  • 小北读财报:太棒了,扇贝听了都想鼓掌!

  • 小北读财报:太棒了,扇贝听了都想鼓掌!扇贝跑了不是一个故事,而是一部电视连续剧。这部剧的导演来自大连市长海县獐子镇沙包村,电视剧能拍成的前提是,獐子岛这样的企业
  • 索罗斯面临妻离友散的危机

  • 索罗斯忠告:“投机事业需要坚韧的神经,随时准备承受打击和痛苦。”“我和基金融为一体;它因我而生,我和它生活在一起,睡在一起......它是我的情妇。这是我与妻子
  • 索罗斯的投机哲学:为投机正名

  • 索罗斯忠告:“我是一个慈善的、哲学的、金融的推理者。” “我只能一而再地对盲目信任市场的魔力发出警告”,“市场中留有投机空间是各国政府的错误”。 “我一生中为了
  • 索罗斯反射理论:三人成虎

  • 索罗斯忠告:“经济学家对这个世界的运作方式欠缺实务上的理解。他们只管做伟大而不现实的梦,只谈理想情况,而且误以为这个世界很有理性。” “然而,流行偏见是市场走势
  • 索罗斯荣枯相生理论及实践

  • 索罗斯忠告:“对荣枯相生周期的清醒认识是评价投机环境和选择投机时机的大前提。” 简单地说,荣枯相生就是开始是自我推进,继而难以维持,最终物极必反。” “观念有缺
  • 帝国循环与广场协定

  • 索罗斯忠告:“一个自我推进的过程——然而它是不能持续的,最终会被颠倒过来。“广场饭店协定显示,汇率自由浮动制度已经走到尽头,取而代之的是所谓“肮脏浮动"(即管理
  • 索罗斯的用人之道

  • 索罗斯忠告:“索罗斯始终在你解释某件事情的时候看着你,而且他对你的解释会作出是否合理的分辨。”“他总是在不断寻找着你的弱点,不断地试图发现你所做的事情哪里出了错
  • 索罗斯打入全球金融领袖网脉

  • 索罗斯忠告:“一个由消息灵通者或重要人物组成的关系网是获取投机信息的特殊重要的渠道。” (与全球金融领袖接近可以)获得了对事件的最感性、最真切和最直接的感受。”