IBMNetezzaTimothyYoung:只怕数据不够大

分享到:
99
下一篇 >

大数据的概念和云计算一样,不是“Netezza是Exadata的灵感来、Simple(简单)、Scalability(可扩充性)和Smart(智——设备管理和分析数据的速度是用户首要需求;让行业用户更容易掌握设备的操作,决定产品其大规模并行处理(MPP)流将多核CPU与FPGA加速流技术引擎(FASTTM)结合,能够提供连那些非常昂贵的系统都无法匹配甚至接近的性能——这些独特的技术使得Netezza在当前“一体机”市场中处于**。

IT圈内的人都知道,一个好的系统架构设计,在很大程度上决定了这款产品的成败,对于处理大数据来说,这个原则显得尤其重要。因此当对一个大型数据集进行操作时,除非**需要,否则不轻易移动数据。Netezza将这一原则发挥至**,利用现场可编程逻辑门阵列(FPGA)组件尽早的将多余的数据从数据流中过滤掉,以减少其对硬盘空间的占用,并将下游组件如CPU、内存和网络从多余的数据处理中解放出来,从而使系统性能有了根本性的显著提高。

*后,肖冰与记者分享了Netezza的架构特点,它结合了SMP(对称多处理)和MPP(大规模并行处理)的优点,建立了一个能以极快的速度分析PB量级数据的设备。该架构中的每一个组件,包括处理器、FPGA、内存和网络连接都经过了精心的挑选和优化,在硬盘物理条件许可的情况下,以*低的成本和能耗快速地处理数据。它通过软件协调这些组件以流水线的方式对数据进行并发操作,从而充分获取和利用每个MPP的节点上*大吞吐量。除了将性能提高几个数量级以外,这个平衡的架构还能够为超过1000的并发处理流提供线性可扩展性,以及非常低的总体拥有成本。

你可能感兴趣: 专家视点 图片 FPGA CPU 处理器
无觅相关文章插件,快速提升流量