图形工作站、集群应用方案
  • 网站首页
  • 商城
  • 产品
  • 行业计算
  • 科学工程计算
  • 化学&生物
  • 图形设计
  • 图像处理
  • 视景仿真
  • 人工智能
  • 影视后期
全球领先的高端图形工作站供应商

免费测试 热线 : 400-7056-800 【 为任何应用提供 最快计算设备 如不符,退货】【最新报价】【选购指南】【京东商城】



企业通用模版网站

  • 科研团队全能超算平台25v1
  • 超高分拼接 数字孪生
  • 科学计算MatLAB工作站24
  • 地质建模 油藏模拟工作站
  • 工业CT扫描 机器视觉计算
  • 电力系统关键应用配置24
  • 网站首页
  • 商城
  • 产品
  • 行业计算
  • 科学工程计算
  • 化学&生物
  • 图形设计
  • 图像处理
  • 视景仿真
  • 人工智能
  • 影视后期
  • 送无人机啦 8核6.4GHz  96核4.8GHz 加速改装 

  • 高性能集群 虚拟并行计算 芯片设计 光学仿真 

  • 蛋白质预测 生物信息 冷冻电镜 材料模拟

  • RSS订阅
  • 理科计算推荐
  • 仿真计算最快最完美25v1
  • 电磁仿真单机与集群25v1
  • 航拍实景建模单机集群
  • 遥感图像处理工作站集群
  • 4K/8K剪辑特效调色24v1
  • AI大模型工作站集群25v1
  • Abaqus硬件配置大全24v3
  • CST电磁仿真工作站25v1
  • 多物理场仿真单机与集群
  • 流体/空气动力学仿真25v1
  • 量子化学 分子动力模拟
  • 三维设计24v2  3D打印

 

您的位置:UltraLAB图形工作站方案网站 > 科学工程计算 > 系统配置推荐 > 主流高性能计算文件管理系统优劣点评

主流高性能计算文件管理系统优劣点评

时间:2009-07-22 01:47:00   来源:UltraLAB图形工作站方案网站   人气:13280 作者:admin
当下市场中有很多高性能文件系统:Sun QFS、IBM GPFS、Quantum StorNext、Red Hat GFS和Panasas等等,那么哪一个是最好的呢?这要取决于你自身的需求。 Panasas首席营销管Len Rosenthal表示:“我们的竞争对手包括NetApp OnTap或者OnTap GX、EMC、IBM GPFS、HP Polyser
  

 

当下市场中有很多高性能文件系统:Sun QFS、IBM GPFS、Quantum StorNext、Red Hat GFS和Panasas等等,那么哪一个是最好的呢?这要取决于你自身的需求。

Panasas首席营销管Len Rosenthal表示:“我们的竞争对手包括NetApp OnTap或者OnTap GX、EMC、IBM GPFS、HP Polyserve或者Sun的开源研究项目Lustre。虽然我们已经取代了运行Sun QFS的系统,但是在销售方面却从来没有真正地与他们竞争。”

Rosenthal表示,Quantum StorNext和HP Polyserve只能处理最高16个集群NFS服务器,所以他们不会与扩展NAS产品竞争。同样地,IBM GPFS和Sun Lustre与Panasas PanFS一样都是并行文件系统,主要被高等院校和政府研究机构用于扩展存储容量的用途,但是他们不提供足够高的I/O率或者快照等数据管理工具。

那么Panasas的竞争对手是如何对此回应的?

IBM公司GPFS产品经理Todd Neville表示,GPFS安装基础非常广泛,其中包括高性能计算、零售、媒体和娱乐、金融服务、生命科学、医疗、Web 2.0、电信以及制造业。Neville也不认同Panasas关于I/O率的说法。

昆腾公司软件业务产品线总监Greg Nuss也强调说,Panasas关于StorNext功能的说法是完全错误的。

他说:“StorNext集群中的每个节点都可以作为一个NFS服务器,并且在终端代表通用文件系统命名空间。现在,我们支持1000个节点,支持与集群连接的附加SAN节点或者附加LAN节点。现在我们每天实际安装的节点大约在300到400个之间。一般来说我们并不与Panasas形成市场竞争关系,因为StorNext一般不配置在扩展NAS架构中,而是用于高性能工作流以及归档架构中。”

与此同时,惠普也反驳了Panasas的说法。惠普表示,HP Scalable NAS在用户集群中能够使用的NAS File Services服务器节点方面并不存在架构性的限制。

HP StorageWorks部门NAS产品营销总监Ian Duncan表示:“我们所说的16个服务器节点限制仅仅是指测试限制。现在我们有许多NAS File Service用户正在使用超过16个服务器节点的集群。”

Duncan表示,Panasas、Sun QFS、IBM GPFS以及Quantum StorNext并不是真正的对称文件系统,而是基于主服务器的集群文件系统——不管是否针对元数据操作和锁定操作,或者两者兼备——这非常容易被作为传统的、单节点系统。然而,Duncan认为这些厂商可能面临主服务器单一角色导致的性能和可用性方面的瓶颈。

Duncan表示:“当添加服务器的时候,在主服务器上的负载增加,这可能会造成性能的削弱,并且在主服务器发生故障的情况下导致更多节点功能性的丢失。相比之下,4400 Scalable NAS File Services采用了HP Clustered File System (CFS),开发出多台独立服务器来提供更高的可扩展性和可用性,将集群与任何独立节点故障或者性能局限隔离开来。”

抛开以上这些,下面让我们来仔细看一看其中一些文件系统。

Panasas PanFS

Panasas PanFS并行文件系统是一个基于目标的文件系统,面向那些在I/O和带宽方面要求高性能水平的扩展应用。与Panasas同样提供支持的NFS或者CIFS不同的是,PanFS采用并行的DirectFLOW协议,该协议是即将推出的pNFS(是NFS 4.1的重要升级)的基础。据称,Panasas并行存储的主要优点是超高应用性能。

NFS服务器要求所有I/O请求必须通过一个NAS文件管理器头(Filer head),而PanFS能够实现数据从客户或者服务器节点向存储系统的并行传输。Panasas系统将NAS机头从数据路径中消除掉,使它不再是I/O瓶颈。例如:Panasas并行存储配合安装全球性能最高的计算机系统——应用在美国新墨西哥洛斯阿拉莫斯国家实验室的Roadrunner超级计算机。它向一个共享文件系统的传输率可以达到每秒100GB。 #p#page_title#e#

Rosenthal表示:“有了这种架构,Panasas并行存储系统可以扩展被上千名用户或者服务器使用,存储容量扩展至数十PB,可以提供超过100GB/s的带宽。这种基于软件的RAID架构包括的其他主要功能能够实现并行RAID重建,使它的速度提高到大多数存储系统的5倍到10倍左右。”

PanFS还应用了Panasas Tiered Parity技术,这项技术可以自动监测和修正无法恢复的组件错误,这一点在重建过程中是非常重要的。最后,这种我呢间系统针对许多仿真和建模应用进行了优化。

但是,Panasas系统是针对文件存储设计的,不是块存储。因此,它一般不应用于以交易为主导的应用,例如ERP、订单输入以及CRM。相反,它常用于那些许多用户或者服务器节点需要向大型文件存储池的共享路径的应用。

HP File Services

HP File Services主要针对那些需要无缝提高应用吞吐量、不用中断服务就可以轻松在线增加存储容量的中小企业用户。HP StorageWorks 4400 Scalable NAS File Services包括一个双阵列控制器和4.8TB容量的HP StorageWorks 4400 Enterprise Virtual Array、三个文件服务节点、管理和复制软件、以及对Windows或者Linux的支持。有了三个文件服务节点和双阵列控制器,4400 Scalable NAS File Services就不会发生单点故障。

缺点是什么呢?Duncan表示:“4400 Scalable NAS File Services不太适合于那些要求超过每秒6GB吞吐量的高性能计算应用。”

Quantum StorNext

StorNext是那些Apple用户的最合适平台选择。而且,在Apple、Windows和其他系统必须与之互动的富媒体环境中,StorNext已经控制住了这个市场。例如,StorNext通常被用于严格的视频生产和回放应用中,因为他能够处理大容量和高清内容的帧频。除了这些StorNext还能做什么?

Nuss表示:“StorNext与其他共享文件系统的主要区别就是与归档层(StorNext/StorageManager)严格的集成度、强大的磁带支持以及对更多操作系统平台的支持。其他文件系统不能在一个集群系统内支持Linux、Unix、Apple和Windows的多种版本。”

StorNext文件系统是一个异构的共享文件系统,具有集成的归档功能。它能够让系统共享图像、媒体、内容、分析数据以及其他文件的高速存储池,这样他们就可以被快速地处理和分配——不管是否与SAN或者LAN相连接。

IBM GPFS

IBM的General Parallel File System (GPFS)已经推出好几年时间了。

Iluminata分析师John Webster表示:“GPFS是一个针对AIX和Linux系统的高性能、共享磁盘、集群文件系统。”

GPFS最初是针对高性能计算设计的,现在它已经扩展到需求高性能、容错和高容量环境中,例如关系数据库、CRM、Web 2.0、媒体应用、工程设计、金融应用和数据归档。

Neville表示:“GPFS是基于一个SAN模型的,所有服务器能够访问所有存储。GPFS允许从任何不与SAN连接的系统进行数据访问,提供了一个SAN仿真软件,允许使用以太网等通用网络来访问数据。”

在每个文件系统的所有磁盘中数据被条带化,这让每个磁盘的带宽被用于单文件服务或者用于产生多文件的聚合性能。这种性能水平被分配给所有节点,然后组成了集群。用户还可以架构GPFS,这样就不会发生单点故障。在核心文件服务功能的上层,GPFS提供了能够在集群之间共享数据的功能,以及基于策略的信息生命周期管理工具,使用这款工具可以将数据在包括磁带在内的不同存储层之间进行迁移。

除此之外,GPFS能够被作为文件服务NAS集群的核心,在这个集群中可以通过集群的所有节点以NFS、CIFS或者HTTP的形式提供数据。用户还可以根据需求的变更来添加或者移除节点或者存储设备。基于GPFS的IBM Scale Out File Services (SoFS)包括许多附加功能性。

Neville表示:“随着文件集中型数据和存储容量的迅速增长,未来NAS将可能延续高性能计算、Web服务或者其他类似的行业趋势,发展成为一种基于标准低成本组件的扩展模式,这也是GPFS的一个核心竞争优势。” #p#page_title#e#

上述的大多数厂商都宣称在多个领域拥有领先优势,同时他们也承认自己的一些劣势领域。底线就是,现场测试和免费试用期的自由使用能够看到这些不同文件系统在你环境中的表现。

关闭此页
上一篇:Windows HPC Server 2008 部署初体验
下一篇:为HPC Server 2008选择合适的网络拓扑

相关文章

  • 05/09Xeon6代+4块GPU--图灵超算工作站GT450M介绍
  • 05/09汽车风阻测试模拟分析、算法,及服务器/工作站计算设备硬件配置推荐
  • 04/26高频交易(HFT)应用分析、算法,服务器/工作站硬件配置推荐
  • 04/25衍生品定价与风险对冲应用分析、算法,及服务器工作站硬件配置
  • 04/25量化交易策略应用算法分析、服务器工作站硬件配置
  • 04/24金融风险管理应用算法分析、服务器/工作站硬件配置推荐
  • 04/19油藏模拟软件的算法分析以及图形工作站/服务器硬件配置推荐25v2
  • 04/17大型3D设计软件CATIA-算法分析与图形工作站硬件配置
  • 04/17Cadence EDA主要软件计算特点分析,服务器/工作站硬件配置推荐
  • 04/16Synopsys EDA主要软件计算特点分析,服务器/工作站硬件配置推荐

工程技术(工科)专业工作站/服务器硬件配置选型

    左侧广告图2

新闻排行榜

  • 1结构/流体/多物理场/电磁仿真最快最完美工作站集群24v2
  • 2Ansys光子学Lumerical FDTD硬件配置信息建议
  • 32024年电磁仿真HFSS单机/虚拟加速/集群硬件配置推荐
  • 4高性能仿真计算集群(结构、流体、多物理场耦合)配置推荐2024v1
  • 5在集群上并行运行COMSOL
  • 6性能超2000核-流体仿真GPU高性能工作站推荐22v4
  • 7CST Studio Suite 2023电磁仿真图形工作站、高性能计算集群推荐硬件
  • 8如何使用Nvidia显卡对abaqus进行加速
  • 9XASUN GPU超级计算机配置全集
  • 10100万亿次/S的GPU异构HPC集群系统方案

最新信息

  • 2025v1工程仿真计算工作站/服务器硬件配置
  • Altair nanoFluidX 硬件和软件概述
  • 模流分析Moldflow系统需求
  • CST Studio Suite 2023电磁仿真图形工作站、高性能计算集群推荐硬件
  • CST Studio Suite & Opera 2023推荐硬件
  • Ansys光子学Lumerical FDTD硬件配置信息建议
  • Ansys SPEOS 的极致光学创新,支持NVIDIA GPU计算
  • ansys 2022R2光学设计软件Speos 支持GPU计算加速算法

应用导航:

工作站产品中心 京东商城 中关村商城 淘宝商城 超高分可视化商城 便携工作站商城 ANSYS CATIA Microsoft INTEL NVIDIA 网站统计

公司简介-业务咨询-招聘英才-资料下载-UM-

本网站所有原创文字和图片内容归西安坤隆计算机科技有限公司版权所有,未经许可不得转载
陕ICP备16019335号 陕公网安备61010302001314号
Copyright © 2008-2023 , All Rights Reserved

首页
热线
商城
分类
联系
顶部