云计算背后 微软全球CIO的大数据实践

不难发现,当人们还在热衷于谈云计算的时候,全球领先的IT企业们已经开始把注意力转向云计算背后的大数据。“大数据比云计算更重要”的判断也许有点夸张,但是可以肯定的是:云计算不单是提供云存储等IT基础架构服务,大数据的处理更是其核心与关键。

微软公司副总裁兼首席信息官Tony Scott的观点让人印象深刻:“大数据存在着巨大的商业价值,但目前大多数数据都被浪费了”。他将微软的IT部门称为第一个吃螃蟹的组织,“大数据也不例外”Scott开门见山。

实施大数据 微软做第一个吃螃蟹者

与多数IT企业一样,除了维护构建基于微软技术之上的全球一体化企业IT平台,他的团队还承担着把关公司产品的责任,微软每有重要的新品发布,都先由Scott带领的IT部门进行不同规模的部署测试。因此也被Scott称为“第一个吃螃蟹的组织”。

据Scott介绍,目前微软IT部门直接管理着9万名员工,8000台公司内部服务器、30万台网络联网设备,每日电子邮箱流量达到600万封,支持着超过1300种微软企业级应用。微软会收集亿级用户的数据,找出具有通用性Bug及编程缺陷,把这些信息做数据分析,以更好的改善用户体验。

分析中主要是测量衡量用户使用微软的产品、服务、研究成果的反馈意见,然后采用微软自身的技术和工具进行大数据分析,并以可视化的方式呈现数据分析的结果。

这些数据来自于公共云或私有云平台,而支撑数据集的分析工具都是通过Windows Azure平台来完成的。Scott称,“这样的技术和分析方式是史无前例的。”

Scott强调,“微软的大数据战略与竞争对手不同,是组合拳的模式,对用户来说,可以自主选择公有云、私有云、外包云或者内部云,大数据方面,也同时支持公有云或私有云的大数据服务。”

大数据到底能给企业带来什么价值?

那么,大数据到底能给企业带来什么价值呢?本质上说,大数据本身没有太多价值。在Scott看来,大数据与传统数据有两个明显区别,一是海量,二是响应速度。大数据利用传统工具往往需要数月时间才能完成分析,而应用大数据工具后,不到1秒时间就可以获取同样结果。基于大数据的处理和分析才能为企业带来的巨大的增值价值。

这些技术对于微软客户来说最关键的部分,就是通过云技术能够让用户获得无限计算的资源,对大规模的数据进行分析,大幅降低成本,并能够让客户获得独一无二的洞察力,而且有的时候是非常专业性的学习能力。

这也意味着一些新的机会。就企业而言,以前可能是一些在数据方面和统计学专业方面的商业分析员,使用着那些普通人看也看不懂的工具,每个月一次生成报表给业务人员或老板们看。而大数据应用成熟之后,业务部门的人也能够使用一般性的商用分析软件或者工具,对一些数据进行分析得出结论,帮助他们做业务决策。这样价格低廉、方便易用的模式,很有可能推动大量行业市场的发展。

从数据收集方面,Scott表示,企业扔掉的数据比收集使用的数据多得多。据国外报告显示,多数企业只用到了收集到数据总量的0.5%来进行决策。但对数据的低效率利用反而带来了巨大的商业机会,“目前有些公司已经开始重新回收数据进行分析,然后再卖给其他企业,”Scott谈到。

Scott十分看好大数据应用在各个行业领域的发展前景,他表示,大数据的应用不仅停留在IT领域,在医药、科学领域、基础研究、制造,以及气象领域都比较适合采用大数据的应用。如果能合理利用这些资源,对其成果进行评估,将对行业有巨大的推动作用。但目前来看,大数据应用还远远不够。

大数据的落地面临哪些挑战?

作为大规模部署云计算的探路者,Scott认为大数据的落地面临很多前所未有的挑战。

大多数企业都在纠结一个问题:到底保留哪些数据?需要保留多久?这都需要从数据的商业价值和相关的IT治理政策条例入手,目前还缺乏一个很好的框架来解决。

另外,人们在谈大数据的时候,非常担心数据的隐私性和安全性。Scott说,“对于大型跨国企业来说,这绝对是挑战。”因为前提是要遵循当地在数据保护安全和隐私性的法规政策。Scott表示,在大数据方面,要加强员工培训,让他们了解当地法规政策,在特定的框架下使用,这没有什么捷径可以走。

不过Scott认为,在普遍实现云计算模式部署之后,CIO的职责也会面临一些挑战。未来的CIO将把重点放在公司的产品、品牌和客户上,听取客户的需求,帮助产品优化,提升公司品牌。正如Scott会经常跟微软的产品技术部门沟通,以及客户沟通,使微软自身能够以微软产品“第一用户”的身份进行经验分享。CIO和IT部门需要帮助公司更加贴近客户,进一步了解客户需求,最终通过满足客户需求获得更大的商业回报。

除此之外,CIO和IT部门通过对大数据的分析,为业务部门提供他们所洞察到的业务发展趋势和最新动态,并对业务模式进行优化和改进,帮助公司更快地发现并适应新的商业趋势。

微软的大数据战略与云计算息息相关,看起来,Scott已经准备好为微软公司IT应用全面转向云计算平台而背水一战了。