2015年12月10-12日,由中国计算机学会(CCF)主办,CCF大数据专家委员会承办,中国科学院计算技术研究所、北京中科天玑科技有限公司与CSDN共同协办,以“数据安全、深度分析、行业应用”为主题的 2015中国大数据技术大会 (Big Data Technology Conference 2015,BDTC 2015)在北京新云南皇冠假日酒店盛大开幕。
2015中国大数据技术大会首日全体会议中, 华为IT产品线大数据解决方案规划总监徐兴海和华为电信软件大数据首席技术规划区波共同 带来了名为“面向业务创新的大数据平台及商业实践”的主题演讲。
华为IT产品线大数据解决方案规划总监 徐兴海
期间,徐兴海在演讲中首先表示,大数据已从炒作走向企业应用,从试点走向生产,其主要表现在:初步完成历史数据大集中;半/非结构化开始采用;进入数仓、征信、风控等关键业务;新的独立组织,新的服务模式;开始重视数据分析师的培养。随后,他表示,未来大数据将全面与云融合,其主要需求在于:平台统一化,线上线下同构;引擎多样化,真正打通;地域分布化,逻辑与物理;能力服务化,与云结合。
华为电信软件大数据首席技术规划 区波
针对华为大数据平台的未来发展,华为电信软件大数据首席技术规划区波表示,首先,华为希望将新技术和传统技术进行有效整合,并且这种整合能力可以在客户间快速地复制;其次,希望这种整合能力能够相对固化,使这些能力在不同的客户快速的复制;第三,华为希望这个平台上能够有一个相对完备的数据资产治理的平台,使得用户真正了解数据、用好数据。
以下为演讲实录
徐兴海:
今天很高兴跟大家分享一下面向业务创新的大数据平台及华为的商业实践,其实大数据从09年开始逐渐变热,这两年大数据的风头明显盖过了云计算。大家觉得是好事吗?不是好事!因为云计算已经走过了炒作的高峰,已经在公有云的带动下规模落地了,人家已经开始赚钱了,现在不是炒作了,大数据去年的报告说还是波峰的下滑当中,泡沫的破灭当中,今年大数据已经开始有走入了企业的应用的苗头,而不仅仅是炒作。
大数据从试点走入应用
这张片子可以看出来大数据从试点走向真正广泛的部署有哪些条件或者哪些标志性的条件,其中第一个标志性的事件是平台厂家的出现和平台厂家的集中度,为什么?你做一个新产业,如果这个新产业需要平台,提供这个平台的厂家全球有一百家这个产定一定做不好,大数据的平台在未来一定存活两到三家,在全球之内,当年虚拟化和云计算兴起的时候有多少个厂家宣称自己是云计算提供商,自己是虚拟化提供商,今天回头看还有多少家,今天已经发展起来了。厂家要集中,这是第一个标志。
第二个更多还是从企业客户的角度来看,企业客户哪些标志着大数据走向真正的广泛部署,第一个标志是数据的大集中,原来的数据都是分散在各个部门,今天这个片子里面每一个关键词,每一个观点背后都有华为的案例,尽量以案例的角度分享,我们可以从银行的角度,我跟一个客户做项目的时候,银行的数据历史上也是非常分散的,最开始大机器系统里面还有大量的查询工作要做,大机是非常贵的,做一次查询要几块钱,现在已经广泛用大数据的卸载,把借记卡、信用卡、理财、信贷、风控这些基础的数据都集中出来,这是第一个标志,第二个半结构化和非结构化场景的使用,银行有很多的客服,经常给银行打电话,一般的客服小姐记录下来的是33字左右,我们每次打电话说了很多话,大量的信息在语音里面,这个语音如何转变成有效的文本,被数据所利用,这是第二个重要的标志。
第三个过了前两个阶段以后,第三个大数据还要进入企业的关键应用,始终在外围做应用还没有标志着它已经从试点走向真正的生产。关键应用有三类,一个是数据仓库,从05年开始在国内大企业广泛的部署形成了ODS、EDW几种形态,在大客户里面分的很清晰。今天移动数据上来的时候很多企业受不了,交易是几何增长,如果还用传统的方式,首先收仓方式非常高,必须用新技术降低对海量数据的处理。 第二个是收仓的扩展性,一个标志是有些大企业对技术掌控比较强的企业已经开始利用大数据改造收仓,卸载收仓,还有用大数据做事实的风控,信用卡被盗刷,原来是事后发现的,如何从事后走向事中甚至事前,需要对每个人做360度的洞察和全网数据的时时监控,这个挑战非常大,有一个长传口技术,很少能找到15天的长传口的监测,需要多大的内存,肯定有新技术在里面。还有成立新的独立的组织移大数据一定是跨部门的,数据联动起来才有价值,现在有一些大客户,包括银行,在上海成立了全行的大数据分析中心,汇集全行的数据分析需求,为什么不把数据分析这个部门成立在每个业务部门里面,因为数据是要打通的,新组织的成立,新的服务模式的出现,也是一个大数据走向企业应用的标志,另外一个是数据分析师在培养,数据分析师在拥有数据的大企业非常重要,这一点很多嘉宾也都讲过了。