大数据人AI重要应用证券市场管理将智能化_[#第一枪]

发布时间：2021-06-07 18:44:53 阅读：次来源：石油蜡厂家

AI人工智能大军即将粉墨登场征战证券监管沙场了。据报道，华尔街两家交易所计划在未来几个月内推出AI人工智能监管工具，交易监管机构希望通过人工智更加快速、智慧地识别市场交易中的违规。美国金融业监管局即将开始测试这批AI监控软件，而纳斯达克和伦敦证券交易所则在今年年底就启用这项技术。

“其实中国证券市场也已经着手准备用AI进行监控了。去年我们国家的股市里面，已经发生了不正当高频交易引发金融安全问题，这些高频交易以前在中国是没有被监管的，这对其他的交易人是不公平的，也由此导致了股市的剧烈震荡。我们正在与某交易所合作，通过对大数据实时甄别高频交易、量化交易等高速情况下发生的不合规交易。以前需要调查人员花费几年时间交叉引用历史交易数据，现在AI人工智能技术瞬间就能完成。”人民大学大数据统计实验室主任、柏睿数据科技公司董事长兼CTO刘睿民博士向记者透露。

业内专家预计预计，2016年国内大数据预计将突破千亿元市场规模，未来4年将呈爆发性增长，2020大数据市场规模有望突破8000亿，本土内存数据库将进入新蓝海时代。中国的数据库行业将迎来颠覆性变革，由中国自主研发的核心技术软件也将迎来更多的话语权。2016年我们的内存数据库有望改写由甲骨文雄霸数据库市场的历史，中国的内存数据库市场正迎来新的拐点。

厉兵秣马备战AI证券监管

道高一尺魔高一丈。较之通过“大数据”监测系统基本能“秒杀”传统老鼠仓模式。在“后大数据时代”，基于数据经验的传统方法就无济于事了。所以华尔街引入AI人工智能系统进行监控。AI人工智能最大的特点是“机器学习”，围棋人机大战里的AlphaGo便是此技术。

早年留学海外，刘睿民曾加盟惠普实验室主攻海量并行MPP数据库，先后参与Nonstop SQL/MP、SQL/MX及Neoview的实现。刘睿民2014年组建团队正式进军大数据MPP内存数据仓库引擎研究，公司拥有世界顶尖级的大数据平台研发团队，并在硅谷、澳洲以及印度设立了研发中心，创新性地推出了面向实时大数据分析领域的高性能分析应用平台Rapids Data Platform（简称RDP），为行业客户提供了从大数据存储到分析挖掘的完整解决方案。刘睿民介绍，在某交易所复杂的交易环境中，借助Hive1.2，Tez0.83，RapidsDB2.63，Spark 1.6对其进行测评结果显示，测试环境随着查询节点的不同，表现能力也各不相同。在Query10查询过程中，Hive、Tez、Spark速度几乎持平；但RapidsDB这匹黑马却只用了1ms，完全秒杀了其他测试环境。事实证明，在小数据量情况下测试结果是传统数据库的2倍，而在大数据量情况下则是50--100倍。

据悉，柏睿数据早已经完成了数千万级的Pre-A融资，领投机构为蓝驰创投，这也是国内顶级基金蓝驰创投在大数据核心技术方向上插下的一个重要旗帜，之后信中利及浦发硅谷银行的加盟，显示知名投资机构已经在布局技术领先的大数据公司了。

内存数据库新蓝海呼之欲来

近期国外爆发了一场史无前例的网络攻击，就是数据库无法处理互联时代海量多渠道并发数据导致的悲剧。刘睿民告诉记者，互联时代数以亿计的智能硬件连接到互联网，其数据量大到惊人，倘若不解决核心技术问题，未来这样的事件，无论在国内还是国外都会频发。所以流数据库就是解决这个问题的不二之选。面对海量数据多渠道并发时代，柏睿的RapidsDB内存数据库突破了传统基于磁盘的数据仓库技术，解决了传统数据仓库难以分析结构化以外数据的难题，并充分利用内存的高性能，通过线性扩展及整合方案为企业带来大幅度显著效益提升。流数据库现在还是非常新的一个东西，所以并没有大范围普及，但一些对技术前瞻性要求的行业如电讯、金融、政府客户已经在开始使用。

有关专家指出，在大数据时代，人人都想多分一杯羹，未来世界必然是数据时代，谁拥有海量能被处理、分析、使用的数据，才能成为拥有未来数据金矿的人。从大数据中“挖出金矿”，是真正考验核心硬技术的阶段，而这一技术现阶段对全球都是公平的。

“大数据市场正处于爆发前夜。春江水暖鸭先知。作为国内内存数据库厂商，我们公司已经收获了若干千万元级别的大单，其主要客户包括：国家电网、深交所、中国移动、中国联通、统计局等。可见越来越多的企业正深刻认识到海量数据来临时，实时处理数据比仅存储更有意义。这同时反映了客户对安全高度重视，倘若重要信息被不法分子窃取，那后果将不堪设想。而我们的流数据库能够提供很好的解决方案。中国本土的内存数据库行业已经走过了试水期，正式进驻国内外市场，国内的市场需求也呈现递增趋势”。刘睿民告诉记者，柏睿在海外市场将有所突破。他们将和房利美（美国两房之一）基于他的分布式流数据内存数据库在大数据实时分析领域有深度合作。

谁来撼动甲骨文霸主地位

一直以来，甲骨文无疑是计算机单机共享内存时代“皇冠上的明珠”，是核心基础软件中唯一横跨CPU、操作系统的关键性技术。所以甲骨文的成就一直被追随但从未被超越。众所周知，传统企业级内存数据库尤其是MPP内存数据仓库由于技术壁垒非常高，市场一直由Oracle、SAP HANA、Teradata这3家国际数据库巨头牢牢把控。国内数据仓库领域，迄今为止还没有一家国产厂商在纯关系型MPP内存数据仓库方向上形成技术突围，只有在数据库技术上成功突围才能令中国数据仓库领域“诺曼底反攻”。

刘睿民曾任多家世界级跨国IT公司的大中国区及亚太高管，归国前在硅谷Tandem公司师从图灵奖大神级得主Jim Gray，共同参与过Tandem NonStop SQL/MP的内核编写。Tandem公司的MPP分布式数据库迄今为止依然在欧美的高端市场傲视群雄。因为有一个共同打造新时代世界级数据库的目标，刘睿民把最早期Tandem并行数据库的实现团队成员，也有长期供职于美国HP实验室的顶级系统架构师这些数据库行业的顶级专家整合到了一起。

刘睿民预测，传统的数据库已经远远不能满足当前海量的数据多渠道并发，2016年我们的新型内存数据库将颠覆传统软件技术，进而改写由甲骨文雄霸数据库市场的历史。面对海量数据多渠道并发时代，柏睿的RapidsDB内存数据库突破了传统基于磁盘的数据仓库技术，解决了传统数据仓库难以分析结构化以外数据的难题，并充分利用内存的高性能，通过线性扩展及整合方案为企业带来大幅度的效益提升。

这一颠覆早有先兆。在美国孟菲斯ISO/IEC JTC1/SC32“数据管理与交换”分技术委员会2016年全会上，中国代表团的流数据库标准提交的大数据技术提案“SQL对MapReduce及与之相关的流数据处理的支持”各项指标准均完胜美国、德国，获得SC32全会决议通过，即将成为2018国际数据库新国际标准。这是29年来中国首度在国际标准委员会独立提出技术提案并获通过。权威专家认为，这充分说明中国技术业已全面突破国际大数据核心技术壁垒实现真正意义上的国产化，中国大数据核心竞争力正在崛起。