大数据的挑战已经为业界普遍关注,而各家厂商所谓的大数据产品也如雨后春笋般不断问世,同时关于大数据的疑惑和争论也不绝于耳,这也让用户有无所适从的感觉。日前,来自EMC的大数据和存储专家、EMC高级产品经理李君鹏做客IT专家网《专家会客室》,为我们解答了关于大数据的一些误解和疑惑,并给出了将大数据的潜在价值转化为真正的业务价值的方法。
李君鹏表示,大数据本身就是一个问题集,云技术是目前解决大数据问题集最重要有效的手段。目前公认处理大数据集最有效手段的分布式处理,也是云计算思想的一种具体体现。
李君鹏指出,云计算提供了基础架构平台,大数据应用在这个平台上运行。云计算带来的是IT的转型,而大数据带来的是业务的转型。IT的转型是为业务转型做准备的,是实现业务转型的基础。他认为,云计算提供了大数据应用的基础,没有云计算这个基础架构,企业就不可能从大数据中获得更大的好处。
也就是说,要想从大数据技术中获益,企业底层传统的IT信息基础架构必须变革、改造,从现在的物理数据中心出发,对基础架构包括服务器、网络、存储这些资源进行虚拟化,形成资源池,让大数据应用建立在虚拟化的基础架构之上。
虚拟化也是云计算的基础,然而,对于虚拟化技术,仍有一些担心。如一些专家认为,服务器的虚拟化技术仍然不够成熟,如应用可能不支持虚拟化,如虚拟化环境中的事件和数据监控会随着应用深入而变得困难,影响实时数据的规模分析。
对此,基于x86的服务器和基于x86架构的存储的虚拟化都相当成熟而且方便,支持虚拟化的应用数量其实也已经很多,而虚拟化也能很好的提供协同处理结构化和非结构化数据的横向扩展体系。因此,建立在云基础架构之上的大数据分析平台,会进一步推动大数据的应用。