存储感悟:回顾2009 展望2010
时间:11-27
来源:比特网
点击:
应为经济形势的原因,去年这个时候对今年的预测很困难,因为经济衰退让一些存储技术的发展放慢了脚步。与往常一样,我们将先看一看之前的预测是否应验,然后在展望一下2010年数据存储和存储网络将会有怎样的发展趋势。
回顾存储2009
我曾预测说,将至少还会再有一家厂商支持T10 OSD文件系统,该系统具有超过目前大多数基于块的文件系统的可扩展性。这个预测从某些方面来说应验了:Sun公布了面向OpenSolaris的T10 OSD QFS,但是却在1月取消了这一项目,并宣布开源OSD QFS。至于现在,除了Panasas我还没有发现有别的厂商将提供基于T10 OSD的文件系统,因此至少就某个时间点来说我的猜测是对的。
我还预测,FCoE即将到来。好吧,我们不难从所有服务器、存储和网络厂商那里看到关于FCoE的产品和计划。虽然FCoE在市场方面的完全成熟还需等待,但这只是一个时间问题。
尽管与所有主张相背离,但是我仍然预测光纤通道的开发将止于8Gb。有消息称16Gb光纤通道标准即将被通过,但是我仍然认为16Gb产品不太可能真正出现。因为这其中存在一系列的问题,例如大多数服务器厂商仍然没有在大型服务器中采用PCIe 2.0,不过这一情况有可能在2010年发生改变。大型服务器曾经是光纤通道发展的主要推动力。全双工、单端口的8Gb光纤通道卡要求PICe总线带宽能够达到1600 MB/s,而成本效益更高的双端口8Gb光纤通道卡则要求带宽达到3200 MB/s。从带宽的角度来看,这意味着单端口卡需要支持8条PCIe 1.1总线或者4条CIe 2.0总线,或者双端口卡支持8条PCIe 2.0总线。但问题是,16Gb双端口卡要求支持16条PCIe 2.0总线。我看到有一些刀片厂商在做16条PCIe 2.0总线,但是我却没有发现任何一款大型服务器提供相关支持。原因可能与架构复杂性和内存互连有关系,这导致多个16条总线的成本变高。PCIe 3.0规范被推迟问世,所以现在很难对它下一个定论。
谈到PCIe 3.0,我曾经说过,这项新标准将会在今年年底或者明年年初被通过。我还预测性能不会翻番(正如从PCIe 1.0升级到PCIe 2.0一样),增长幅度大约在40%~60%之间。这一点我猜错了:PCIe 3.0因为碰到了一些互操作性问题而被推迟到2010年第二季度,预计性能为每个通道1GB/s,性能将翻一番。
关于今年硬盘的发展方向的预测我是对的:正如去年写道的,"任何企业硬盘密度方面的增长都来自于SAS驱动器,而不是光纤通道驱动器。密度增长大约50%。到年底我们可能会看到2TB的SATA硬盘。"这些都被验证了。
在RAID方面,我写道:"研究领域的很多人和高性能计算领域的一些博主认为,正如我们所知,RAID是一项最终要面临灭亡命运的技术。"不过我的预测到目前还没有变成现实。
我曾在去年说过,我们可能会看到一些来自厂商的产品端对端地支持T10 Data Integrity Field标准。现在你已经可以买到支持这一标准的HBA产品,硬盘厂商也发布了支持该标准的SAS驱动器,但是我们仍然在等待来自存储控制器厂商方面的消息。
在存储软件方面,我说过ILM厂商将会发布解决Sarbanes-Oxley法规遵从、HIPAA和电子发现法规问题的产品,现在来看存储硬件和软件厂商已经推出了这些类型的产品。
另外一个很容易进行预测的就是在文件系统方面,我曾说过"文件系统方面不会有任何新变化。现在我们仍然看到和过去20年一样的问题。"还有一个没有难度的预测就是,错误管理方面不会有什么变化,这点我也猜对了。
我曾预测,由于POSIX存在很大的局限性,所以T10 DIF和ILM等在POSIX方面的变化将成为人们讨论的话题之一。好吧,现在除了我自己,还没有人真正谈到这个问题。
这样算下来,我猜对了6个猜错了4个,其中16Gb光纤通道方面的预测还没有定论。
展望存储2010
这次我先从一些很容易预测的项目开始说:
·大多数存储厂商将在2010年年底提供FCoE接口支持,以端对端的形式支持FCoE。这应该是一个很简单的预测,因为考虑到光纤通道可以节约成本和精简线缆,所以市场对FCoE还是有需求的。对控制器的设计集成和测试还需要一段时间,所以自然这需要比服务器或者互连技术变化更长的时间。
·PCIe 3.0将投入市场,首先用于刀片产品中。从目前来看这几乎是已经确定的了。
·诸多存储厂商和服务器厂商将解决端对端数据完整性问题。现在这方面的预测变得有些复杂。考虑到数据路径中误纠正或者未被检测出的错误所带来的市场需求,我相信厂商将在2010年满足这一需求。这将是文件系统技术方面唯一一个、也是长期以来的第一个重要变化。
·2010年闪存固态驱动器(SSD)市场将进行市场整合。目前就市场规模来看,厂商的数量太庞大了。某些厂商要么进行合并,将自己出售,要么被市场淘汰。闪存磁盘驱动器市场规模太大,即使技术不断升级,也无法支持如此庞大的厂商群。STEC最终将在企业固态盘市场面临来自Pliant和希捷等厂商的挑战。
·闪存固态盘利用率将所有增长,多家RAID厂商和控制卡厂商将提供更好的支持,这意味着2010年将有更高的带宽和更高的IOPS。
·10Gb以太网将成为几乎所有系统的标准配置。戴尔和惠普等厂商的高端家用PC将支持这项技术。多家厂商提供的家用路由器也有可能在年底提供这方面的支持。
·2010年NFSv4.1 (pNFS)将通过多家厂商的产品进入市场。
·40和100Gb以太网将继续向产品可用性方面努力,到2010年将可能被用于交换机之间的互连,但是最终面向市场要等到2011年了。40Gb在双端口主机方面的应用要求至少支持16通道PCIe 3.0,而且现在PCIe 3.0仅提供16 GB/s的带宽,而全速率、全双工操作则需要20 GB/s的带宽。PCIe 3.0是实现主机连接性的必备条件。
最后但也是最重要的:到2011年年底,现在你听到关于"云"的噱头将大大减少。从某些方面来说云是一个很好的技术理念,但是与90年底末的一些存储服务提供商和应用服务器提供商或者最近十几年出现的网格计算一样,云也将面临同样的命运,SSP和ASP将提供针对某些应用的服务,但是他们不可能为所有企业解决所有问题,因为不可能有足够的带宽支持,对于某些应用来说延迟过高,端对端的安全问题也无法以标准方法来解决。而且,有哪个企业会放弃对他们最关键数据的控制器?我估计没有吧。
编辑:博子
回顾存储2009
我曾预测说,将至少还会再有一家厂商支持T10 OSD文件系统,该系统具有超过目前大多数基于块的文件系统的可扩展性。这个预测从某些方面来说应验了:Sun公布了面向OpenSolaris的T10 OSD QFS,但是却在1月取消了这一项目,并宣布开源OSD QFS。至于现在,除了Panasas我还没有发现有别的厂商将提供基于T10 OSD的文件系统,因此至少就某个时间点来说我的猜测是对的。
我还预测,FCoE即将到来。好吧,我们不难从所有服务器、存储和网络厂商那里看到关于FCoE的产品和计划。虽然FCoE在市场方面的完全成熟还需等待,但这只是一个时间问题。
尽管与所有主张相背离,但是我仍然预测光纤通道的开发将止于8Gb。有消息称16Gb光纤通道标准即将被通过,但是我仍然认为16Gb产品不太可能真正出现。因为这其中存在一系列的问题,例如大多数服务器厂商仍然没有在大型服务器中采用PCIe 2.0,不过这一情况有可能在2010年发生改变。大型服务器曾经是光纤通道发展的主要推动力。全双工、单端口的8Gb光纤通道卡要求PICe总线带宽能够达到1600 MB/s,而成本效益更高的双端口8Gb光纤通道卡则要求带宽达到3200 MB/s。从带宽的角度来看,这意味着单端口卡需要支持8条PCIe 1.1总线或者4条CIe 2.0总线,或者双端口卡支持8条PCIe 2.0总线。但问题是,16Gb双端口卡要求支持16条PCIe 2.0总线。我看到有一些刀片厂商在做16条PCIe 2.0总线,但是我却没有发现任何一款大型服务器提供相关支持。原因可能与架构复杂性和内存互连有关系,这导致多个16条总线的成本变高。PCIe 3.0规范被推迟问世,所以现在很难对它下一个定论。
谈到PCIe 3.0,我曾经说过,这项新标准将会在今年年底或者明年年初被通过。我还预测性能不会翻番(正如从PCIe 1.0升级到PCIe 2.0一样),增长幅度大约在40%~60%之间。这一点我猜错了:PCIe 3.0因为碰到了一些互操作性问题而被推迟到2010年第二季度,预计性能为每个通道1GB/s,性能将翻一番。
关于今年硬盘的发展方向的预测我是对的:正如去年写道的,"任何企业硬盘密度方面的增长都来自于SAS驱动器,而不是光纤通道驱动器。密度增长大约50%。到年底我们可能会看到2TB的SATA硬盘。"这些都被验证了。
在RAID方面,我写道:"研究领域的很多人和高性能计算领域的一些博主认为,正如我们所知,RAID是一项最终要面临灭亡命运的技术。"不过我的预测到目前还没有变成现实。
我曾在去年说过,我们可能会看到一些来自厂商的产品端对端地支持T10 Data Integrity Field标准。现在你已经可以买到支持这一标准的HBA产品,硬盘厂商也发布了支持该标准的SAS驱动器,但是我们仍然在等待来自存储控制器厂商方面的消息。
在存储软件方面,我说过ILM厂商将会发布解决Sarbanes-Oxley法规遵从、HIPAA和电子发现法规问题的产品,现在来看存储硬件和软件厂商已经推出了这些类型的产品。
另外一个很容易进行预测的就是在文件系统方面,我曾说过"文件系统方面不会有任何新变化。现在我们仍然看到和过去20年一样的问题。"还有一个没有难度的预测就是,错误管理方面不会有什么变化,这点我也猜对了。
我曾预测,由于POSIX存在很大的局限性,所以T10 DIF和ILM等在POSIX方面的变化将成为人们讨论的话题之一。好吧,现在除了我自己,还没有人真正谈到这个问题。
这样算下来,我猜对了6个猜错了4个,其中16Gb光纤通道方面的预测还没有定论。
展望存储2010
这次我先从一些很容易预测的项目开始说:
·大多数存储厂商将在2010年年底提供FCoE接口支持,以端对端的形式支持FCoE。这应该是一个很简单的预测,因为考虑到光纤通道可以节约成本和精简线缆,所以市场对FCoE还是有需求的。对控制器的设计集成和测试还需要一段时间,所以自然这需要比服务器或者互连技术变化更长的时间。
·PCIe 3.0将投入市场,首先用于刀片产品中。从目前来看这几乎是已经确定的了。
·诸多存储厂商和服务器厂商将解决端对端数据完整性问题。现在这方面的预测变得有些复杂。考虑到数据路径中误纠正或者未被检测出的错误所带来的市场需求,我相信厂商将在2010年满足这一需求。这将是文件系统技术方面唯一一个、也是长期以来的第一个重要变化。
·2010年闪存固态驱动器(SSD)市场将进行市场整合。目前就市场规模来看,厂商的数量太庞大了。某些厂商要么进行合并,将自己出售,要么被市场淘汰。闪存磁盘驱动器市场规模太大,即使技术不断升级,也无法支持如此庞大的厂商群。STEC最终将在企业固态盘市场面临来自Pliant和希捷等厂商的挑战。
·闪存固态盘利用率将所有增长,多家RAID厂商和控制卡厂商将提供更好的支持,这意味着2010年将有更高的带宽和更高的IOPS。
·10Gb以太网将成为几乎所有系统的标准配置。戴尔和惠普等厂商的高端家用PC将支持这项技术。多家厂商提供的家用路由器也有可能在年底提供这方面的支持。
·2010年NFSv4.1 (pNFS)将通过多家厂商的产品进入市场。
·40和100Gb以太网将继续向产品可用性方面努力,到2010年将可能被用于交换机之间的互连,但是最终面向市场要等到2011年了。40Gb在双端口主机方面的应用要求至少支持16通道PCIe 3.0,而且现在PCIe 3.0仅提供16 GB/s的带宽,而全速率、全双工操作则需要20 GB/s的带宽。PCIe 3.0是实现主机连接性的必备条件。
最后但也是最重要的:到2011年年底,现在你听到关于"云"的噱头将大大减少。从某些方面来说云是一个很好的技术理念,但是与90年底末的一些存储服务提供商和应用服务器提供商或者最近十几年出现的网格计算一样,云也将面临同样的命运,SSP和ASP将提供针对某些应用的服务,但是他们不可能为所有企业解决所有问题,因为不可能有足够的带宽支持,对于某些应用来说延迟过高,端对端的安全问题也无法以标准方法来解决。而且,有哪个企业会放弃对他们最关键数据的控制器?我估计没有吧。
编辑:博子
- MemoRight推GT系列128G高速SSD(03-24)
- 世界最薄 忆捷E301移动硬盘震撼耀市(03-29)
- 忆正MemoRight SSD 填补中国电脑空白(04-03)
- 史上最高读取速度!新款SATA II固态硬盘面世(04-10)
- 创见信息推出首款eSATA双接口外接式硬盘(04-19)
- 索尼新家用NAS设备带1.5T硬盘(04-20)