中国信通院魏凯:面向金融需求的大数据平台测试

现在实际的情况是我们去年一年关注第一轮的标准和评测,我们关注性能,组织第一轮面向企业级大数据产品的评测活动,这些厂商都是巨头,中国移动、华为等公司参与了这个评测活动,是第一次最大规模集群的商业产品的评测,比工行那个系统的规模还大,工行130多个节点,这个是200个节点的测试,数据量非常大。这是去年我们做的第一件事情,面向商用产品的性能专项的测试,这是当时测试的规模。我们有两种类型的测试,这个数据量是面向16台的规模,200多台的规模是线性增长的放大。这是去年的测试结果,我们对典型负载做了一个测试,通过这个测试的五家产品的均值、吞吐率、单节点平均的效率问题,这是去年做的测试。去年做完以后大家的反响挺强烈,大家需要某种程度上能规范产品开发POC测试的标准,大家很认可这种做法,但是也提出了很多改进的意见。大家不仅关心性能还关心更多的能力,包括运维管理能力、可用性、功能、金融性、安全、多租户、可宣传,希望把这些能规范出来。去年12月到今年年初1月份的时候形成了一个指标体系,7大类指标,38个详细的指标。1月份到3月份我们组织了一轮认真的公开公正自愿参加的评测活动,昨天上午第一轮的基础能力、全面维度的大数据产品评测的认证结果刚果发布,6家做系统的厂商的产品通过了严格的测试,拿到了证书。东方金信、明略、博易智软、华三、星环信息、腾讯云,昨天360宣布要晋剧大数据企业级的平台市场,要作为软件提供商出现。明略本来是做秒针做C端生意,也在往B端转,这是一个很好的现象,做供应侧平台能力的厂商越来越多。

这是我们测试的认证结果。运维能力,我们有必须满足的这些指标,只有必须满足的指标通过了才能拿到认证。我们还有可选的指标,比如希望这个集群是无宕机的升级,我们在多租户方面、安全性方面都有很严格的要求。多租户是需求时很热的能力。实践方式差异很大,有的低于队列有的机遇docker。安全安全的方案非常多,我们把这些信息都呈现出来。可用性,兼容性,可扩展性,扩展性包括集群能不能自动动态的扩容,能不能动态地收缩,这都是需要的。吞吐量是波峰波谷差异很大的,闲置的话会把机器给openstack用,这就闲置出来了。我们做了数据导入、SQL任务能力等常见的能力。我们希望能够通过跟需求端不断的交流来完善我们这套体系,这是一个规划,打五角星的是我们现在做的,只是对基础平台做了一个评测,完成了功能性的基础能力的任务,五月份会启动性能专项的测试,有的厂商会超过500台的规模。数据治理的这套软件可能会沉淀成一套产品,我们跟随市场节奏一步步去做。

为了完善这套评测体系,为了更了解客户的需求,我们现在在李司的指导下,人民银行信息化研究所和中国信通院联合正在进行面向银行业大数据应用的调查,希望通过一些问卷的形式跟客户直接面对面,我们把两边的专家都叫到一块通过问卷的方式收集大家对未来路线的规划、技术架构的演进和产品指标的需求,总的目标是通过不断的迭代让需求侧和供给侧信息不对称降到最低,让产业发展的成本降到最低,大家各方的利益最大化,共同促进不管是银行业系统的部署、业务的开发还是国内大数据产业的发展。习总书记在网信办的座谈会上讲我们现在处于变道超车的时代,轨道在切换,从集中到分布,从原来的小机到X86,国内的技术供给侧从来没有一天能像现在这么接近世界水平,虽然我们还有距离,但是已经无限接近了,如果能够抓住这个机会把这两端联合在一起,未来可能不会再提国产化的悲哀,这是我们最重要的一个目标。

我的演讲到此结束,谢谢!