针对几个行业,IBM给出了具体的大数据应用场景和解决方案,包括制造业、金融和电信等大型传统行业。IBM的大数据战略非常清晰,一步一个脚印走的很坚实,其前景将被看好。
英特尔凭Hadoop向大数据靠拢
虽然Hadoop并不是大数据代名词,但当提到大数据生态系统的时候,人们还是会首先想到Apache Hadoop。同大数据类似,Hadoop是一整套技术与产品的组合,来源于Apache软件基金会的开源项目,可以为企业提供一个可靠的、可扩展的分布式计算环境。它包括了MapReduce计算框架、HDFS存储系统、HBase数据库以及Hive等工具,能够对非结构化数据进行有效的操作与处理。这也是Hadoop在大数据时代独领风骚的重要原因,因此许多厂商都希望通过Hadoop来抓住大数据所带来的机遇。
在今年的七月份,英特尔公司对外发布了自己的Hadoop商业发行版(Apache Hadoop Distribution),也是这几家大型厂商中唯一拥有自身发行版Hadoop的一家。靠硬件芯片起家的英特尔为何要走这条路?
英特尔实际上已经看到企业用户对于大数据的需求在不断增长,特别是在中国。目前国内的Hadoop应用大多数集中在互联网行业,传统行业没有专门的技术团队可以担负起维护开源Hadoop集群的重任。除Oracle、IBM这样的厂商会提供一些异常昂贵的Hadoop服务之外,像Cloudera、Hortonworks这样的顶级Hadoop提供商在国内的投入力度却非常小。这虽然让人有些意外,但国内用户的确是需要一个“靠谱的”Hadoop解决方案,来切实解决大数据问题。英特尔的Hadoop发行版恰好能解决这一问题。
英特尔Hadoop发行版包含了所有的分析、集成以及开发组件,并对不同组合之间进行了更加深入的优化。此外,还添加了英特尔Hadoop管理器(Hadoop Manager),从安装、部署到配置与监控,可以提供对平台的全方位管理。目前英特尔已经开放了免费下载,随着推广力度的不断加大,相信英特尔的Hadoop还是能很轻松地在国内大数据市场分一杯羹。
微软大数据战略依然延续“端到端”
对于微软企业级部门来说,今年是非常重要的一年。大面积的产品更新以及在云计算业务方面的进展,让微软在2012年吸引了大量关注的目光,当然大数据就是其中之一。微软在今年上半年正式发布了SQL Server 2012数据库平台,并添加了Hadoop的相关服务,逐渐将数据业务延伸到非结构化数据领域。而伴随Windows Azure Marketplace和SharePoint等工具的推出,微软已经具备了打造端到端的大数据平台的能力。
微软的大数据解决方案涵盖了管理、扩展和洞察三个层面,从各个角度来把握大数据生命周期。其中数据管理层将对所有类型的数据进行搜集和管理,包括结构化、半结构化、非结构化和流数据;数据扩展层主要实现数据发现的功能,通过多种类型、多种数据源的互连实现对数据集的丰富;洞察力层主要面向应用,通过数据挖掘以及多种数据展现工具,实现任何用户对任何位置的任何数据洞察。
微软对大数据生命周期的三个层面都投入了大量的研发力度:SQL Server 2012数据库和并行数据仓库(Parallel Data Warehouse)将作为结构化数据的处理平台。针对非结构化数据,微软也将推出全新的Hadoop服务HDInsight,该产品包括公有云(Windows Azure)和私有云(Windows Server)两个版本,提供企业级的Hadoop服务。
另外,最新发布的Windows Azure Marketplace将实现大数据的共享,通过开放数据协议(OData)展现数百种来自微软和第三方的应用程序和数据挖掘算法。用户还可以使用最熟悉的工具从结构化和非结构化数据中获得可执行的洞察力,包括SQL Server分析服务(SSAS)的PowerPivot和Power View,通过连接器就可以对Hadoop分布式文件系统中的非结构化数据进行分析与展现。