2013年大数据真谛:实时分析与批量处理

全球经济环境的不景气直接影响了IT系统建设的资金投放。不过,Gartner认为“major retardants to IT growth will lift”。随着全球经济正在更大范围内复苏,2013年会出现增量。其中,IT支出将达到3.7万亿,较2012年将增长4.2%。这比之前所预测的3.8%还有增加,由此可见其乐观态度。此外,全球软件支出预计降到2960亿美元,增加6.4%;热点技术如安全、存储管理、客户关系管理等将驱动更高的增长,而全球电信市场仍然是IT最大的消费市场。

在Gartner看来,2014年, “大数据” 分析工具将会被视为一种必要的投资。与此同时,由于基于Android的手持设备的强势进攻,平板和PC市场都将收到最严重的打击。

Gartner:全球IT预算评估图

几乎同一时间,摩根斯坦利也发布了报告。其认为2013年大数据十大最快增速领域是:

  1. Healthcare 医疗
  2. Entertainment 娱乐
  3. Com/Media 互联网/媒体
  4. Manufacturing 制造业
  5. Financial 金融业
  6. Business Services 商业服务
  7. Transportation 运输业
  8. Web Tech Web技术
  9. Distribution 通讯
  10. Engineering 工程

 

若干的新技术出现,使得企业在选择平台、产品、方案和服务的时候更容易陷入不同的矛盾中,轻易做出的抉择往往会被实践所推翻。2012年,产业更多模式体现的是,将Hadoop和大数据等同起来。但又不仅局限于Hadoop。比如Cloudera的Impala,不仅是Hadoop,还关注提供所有应用程序的时间响应需求的服务,以及流量、流速、种类以数据价值分析等方面的服务。

所以,美国很多资深技术派人士如Jim Kaskade的眼中,2013年以下技术组件是必须的:

  1. Real-time stream processing 实时流处理
  2. Ad-hoc near real-time analytics (see NoSQL and NewSQL data stores)特别接近实时分析( 基于NoSQL和NewSQL的数据存储)
  3. Batch Analytics 批量处理与分析

最重要的是,不是一个,而是要同时满足三个方面,才是大数据真谛所在。(王旭东/审校)