如何应对大数据雪崩?

归根结底,组织需要解决延迟问题,才能更快地找到实时数据并进行处理。显然,欺诈检测、合规性、电子发现和企业监管等工作负载都需要具备“海底捞针”的能力,以防审计失败或数据泄露。但是,面向公众的应用(例如 OLTP、客户自助服务、呼叫中心、CRM、供应链管理和市场营销自动化)还需要兼具精确度与速度。用于执行事务处理和实时分析的混合系统正在蓬勃发展,对它们来说,存储延迟变得至关重要。

如果没有固态硬盘提供的速度,大数据分析就无法为大多数应用提供可持续的竞争优势。

计算速度更快

要充分利用更快速的存储系统,关键步骤之一就是确保服务器的计算中心可以达到数据处理所需的更高利用率。要使服务器配置达到性能目标,同时又不超出预算,针对目标应用和工作负载均衡选择 DRAM 至关重要。

现在,内存/存储分层结构方面出现了一个值得思考的新转折点——持久存储。顾名思义,持久存储位于 DRAM 总线上,可提供极低的 DRAM 延迟,同时可确保数据持久性。由于存储总线存在限制,而且闪存需要更多的访问模式,DRAM 的延迟比速度最快的固态硬盘低了若干数量级。

目前,持久存储解决方案基于 DRAM 和闪存技术而构建,被称作“非易失性 DIMM”(NVDIMM)。这项新技术的优势在于,它最终可将关键数据(就算是断电也不能丢失的数据)迁移到离处理器尽可能近的位置。有效工作在 DRAM(例如标准 DIMM)中完成,但是数据可在断电时快速写入闪存(电容器或电池系统在足够长的时间内为模组供电,以完成备份任务)。如果应用中有经常需要访问或修改的元数据,或者只是应用需要确保指定数据集实现尽可能快的速度,那么这是极具吸引力的选择。

在近期的一篇文章中,一家领先的服务器 OEM 表示,Microsoft 运用范围极广的 SQL Server 数据库通过利用 NVDIMM,可将速度提升两到四倍—性能得到了极大的提升。但是,这一说法最引人注目的一点可能在于,服务器系统才刚刚开始采用 NVDIMM;如果对操作系统和软件应用进行全面优化,可以充分利用内存总线上的持久数据,那么性能将再次获得大幅提升。不过,NVDIMM 提供的性能优势以及服务器市场的竞争格局都在快速推动着这些变化。所有希望在数据分析领域先人一步的 IT 管理员现在都应该考虑如何将时效性最强的任务迁移到基于 NVDIMM 的持久存储系统。

评估并选择一整套适合大数据的存储和内存产品组合

现在,针对大数据和其他先进工作负载革新和重新调整数据中心基础设施非常重要,并且,这一点在未来数年内会变得日益重要,同时也会极具挑战性。但是,这并不一定意味着需要全盘更换。精明的 IT 决策者正在寻找全新的存储和内存选项,它们既要能顺利适应旧环境,又能为针对分析工作负载进行了优化的全新基础设施奠定基础。

美光科技是硅基存储和内存解决方案的全球领导者,一直备受业界赞誉。其旗下拥有丰富的固态硬盘、DRAM 和 NVDIMM 产品系列,对于需要快速、可靠的大数据解决方案的基础设施管理员来说,美光科技是他们理想的合作伙伴。特别值得一提的是,美光科技提供完整的产品线,可让大数据变为“大而快的数据”,而这现已成为以分析为中心的基础设施的基础。

以固态硬盘为例。在开发和提供各种适用于全新存储环境的固态硬盘方面,美光科技一直处于领先地位。使用美光闪存解决方案的一个优势在于,该公司非常了解基础闪存存储介质,因为这个介质就是由美光设计和制造的。

固态硬盘的密度正在快速增加,并且正在超越传统硬盘系统。有了这种容量上的跨越,购买闪存存储比继续使用旋转式硬盘更有意义。此外,与基于 SATA 的传统硬盘相比,基于 SATA 的固态硬盘的功耗要低得多,这可以极大地吸引注重节约成本的购买者。

与此同时,美光科技继续通过最新的 3D NAND 解决方案在闪存存储领域突破极限。这项新技术让容量变成了之前的三倍。3D NAND 的容量更大、性能更高且能耗要求更低,因此非常适合要求最严苛的分析工作负载。

DRAM 是美光科技在 30 多年前推出的首款产品,该公司也一直是世界上最大的 DRAM 供应商之一。美光提供采用各种技术和外形规格的 DRAM,并与每个重要的服务器 OEM 精诚合作。此外,美光还提供一整套非易失性 DIMM,该产品系列兼具 DRAM 的速度和 NAND 闪存的持久存储优势,如上文所述。