频 道 直 达 - 新闻 - 读书 - 培训 - 教程 - 前沿 - 组网 - 系统应用 - 安全 - 编程 - 存储 - 操作系统 - 数据库 - 服务器 - 专题 - 产品 - 案例库 - 技术圈 - 博客 - BBS
51CTO.COM_中国领先的IT技术网站
找资料:

硬件加速:高性能绿色存储系统的保障

作者: 马剑杰 出处:51CTO.com 2008-05-13 16:16    砖    好    评论   进入论坛
阅读提示:LZS压缩算法既继承了LZ算法压缩率的诸多特性,同时兼备硬件逻辑实现简便,更高的压缩性能的良好品质。值得称道的是,LZS算法还会自动检测数据是否已经压缩,充分避免对已经压缩的数据进行重复压缩操作而导致的数据膨胀,即对于图片,音频和视频等多媒体文件,以及部分已经压缩过的文件,消除重复压缩导致数据无谓膨胀的影响。

随着企业用户数据呈现指数级增长,对于数据中心的标准要求也水涨船高,首当其冲的是现有的网络基础设施和存储系统不得不加速扩容的步伐。如若仅简单地复制原有的系统,单纯以增加硬件数量来获取更高的性能,该模式下的系统扩容远远不足以应对随之而来的信息挑战。在统筹评估整个系统的过程中,除性能价格比这一考核指标外,用户开始越来越重视性能能耗比这一参数。采用数据压缩技术,明显降低CPU负载,改善存储系统的性能,节省功耗,真正满足更高效,更环保,更绿色的数据中心新诉求,已然提上了企业信息系统优化的历史日程。

所谓“数据压缩”,是指在一定的数据存储空间要求下,将相对庞大的原始数据,重组为满足前述空间要求的数据集合,使得从该数据集合中恢复出来的信息,能够与原始数据相一致,或者能够获得与原始数据相同的使用品质。相对于未采用压缩技术,采用不同的压缩技术之后,存储和传输中的数据会显著缩小,网络系统和存储系统的利用率因此提高。

从实际应用来说,“数据压缩“可从两方面来衡量:数据压缩速度和数据压缩率。当数据压缩应用于网络传输时,人们通常关注的是速度快慢;当数据压缩应用于数据存储中,则问题的焦点转嫁到压缩率,即压缩后数据的大小。看似不相关的两个方面,其本质上是相辅相成的。一般桌面PC上广泛采用的ZIP和RAR算法,并不适合于存储应用。这主要是由于,ZIP和RAR算法本身的实现复杂度,使得这两种算法难以借力硬件实现。遗憾的是,软件实现带来的性能偏低,难以满足现有的存储系统高性能,低能耗的诉求。

比较图示:

特征

 LZS算法

 ZIP/RAR算法

压缩速度
解压缩速度  快
平均压缩比 一般

常用的文件类型和压缩算法:

文件类型

压缩算法

文本 LZ系列算法
图像 JPEG2000无损压缩算法
视频 RealPlayer公司无损压缩算法,Apple公司无损压缩算法

-来源: SNIA 教学课程 《Benefits of Hardware Data Compression in Storage Networks》

综上图表中可以看出:一般数据,主要是字符内容的压缩通常采用LZ系列的压缩算法,而Hifn公司拥有专利的LZS算法正是基于LZ系列压缩算法的基础上所做的扩展。LZS压缩算法既继承了LZ算法压缩率的诸多特性,同时兼备硬件逻辑实现简便,更高的压缩性能的良好品质。值得称道的是,LZS算法还会自动检测数据是否已经压缩,充分避免对已经压缩的数据进行重复压缩操作而导致的数据膨胀,即对于图片,音频和视频等多媒体文件,以及部分已经压缩过的文件,消除重复压缩导致数据无谓膨胀的影响。正是因为LZS压缩算法的优异特性,该算法已经被广泛深入地应用于网络和存储各个领域,并被ANSI,IETF,ATM论坛,Frame Relay论坛等国际标准组织和技术联盟采纳为业界标准的一部分。

作为信息优化和保护的推动者,美国Hifn公司在数据优化领域,十余年来锐意进取,倾力开发,成功推出了创新型硬件加速产品DR系列,为企业级用户降低扩容成本,改善存储系统的性能,降低整个存储系统的功耗,最终实现绿色扩容的目标贡献自身杰出的数据优化和节能表现,成为EMC、Netapp、HP等全球重要存储网络设备领先厂商信赖的对象.

经典案例:

最近,国内某著名存储厂商与Hifn展开在硬件加速压缩技术方面的合作,使企业级客户面临的存储备份难题迎刃而解。采用Hifn公司硬件压缩技术之后,其 VTL系统设备不仅提升了原有数据备份速度,同时更有效的减小用户备份窗口,降低对磁盘空间的耗用。

对于同样的存储空间要求,采用硬件压缩之后,实际部署的物理存储空间能够减小一半甚至更多,显著提高存储空间的利用率,硬盘,驱动器及其他配件也得以减免,为设备托管用户避免了更多的设备资源上的浪费,极大节省了托管费用。性能不变,功耗减半,同时因控制了硬盘驱动器的数量,整个存储系统的可靠性大大增强。

【作者为汉帆杭州信息技术有限公司现场应用工程师 】

【责任编辑:老杨 TEL:(010)68476606】

专题
双机热备技术
SATA与eSATA应用指南
存储为核心的系统发展之路
RAID——磁盘阵列基础
业务连续性与灾难恢复
我也说两句

匿名发表

(如果看不清请点击图片进行更换)


中 国 领 先 的 IT 技 术 网 站 ·
技 术 成 就 梦 想
·RAID——磁盘阵列基础 (查看37896次)
·双机热备技术 (查看23698次)
·SATA与eSATA应用指南 (查看20124次)
·iSCSI应用与发展 (查看18952次)
·磁盘阵列入门:组建raid (查看17081次)
订阅技术快讯
电子杂志下载
名称:SQL Server数据库管理精品黄皮书
简介:书中文章经过精挑细选,便于用户能根据自己的实际工作和学习,快速在本书寻找到相关资料。内容涵盖了SQL Server的安装与升级、语句查询、数据备份和恢复、自动化任务、数据同步、数据字典、安全和预防、性能和优化、集群等各方面应用信息,以及DBA管理人员在数据库管理工作中
名称:2007路由技术大全
简介:《2007路由技术大全》由51CTO.com网站特别策划制作,该书包括路由器技术、路由器产品、路由器配置、安全设置、路由器故障处理、路由器密码恢复,以及广大网友在实践使用中的心得经验和技巧文章,内容注重实用性,适用于初学者入门,也适合多年从业者提高,是一本实践和理论完
名称:网络安全精品应用黄皮书
简介:《2007精品网络安全黄皮书》包括了9个大类24个小类, 800余篇文章,内容包含了熊猫烧香病毒、DDOS攻击、ARP病等热点问题的介绍及解决方案。从病毒查杀、防范、系统、数据等各方面的安全设置到黑客技术的了解、防范,涉及到了安全应用的全部领域, 由浅至深内容全面。
全面解析35岁技术人的价值与出路
全面解析35岁技术..
汶川大地震 IT技术人为同胞生命祈福
汶川大地震 IT技..
企业数据恢复指南
企业数据恢复指南
· 企业数据恢复指南
· 龙芯要做中国的“奔腾”
· 2008年上半年全国软考..
· 交换机故障解决指南
· Vista SP1对决XP SP3
· 华为路由器配置
· LAMP技术精解
· 微软出价446亿美元收购..
· 网络故障排除宝典
· AIX操作系统管理应用(..
· 华为员工自杀频频拷问..
· 三层交换技术专题
· ARP攻击防范与解决方案
· 隐私保护技术探讨
· 反垃圾邮件技术应用
· Windows Server 2008专..
ARP攻击防范与解决方案
ARP攻击防范与解..
iSCSI应用与发展
iSCSI应用与发展
SQL Server 2008/2005全解
SQL Server 2008/..
· SQL Server 2008/2005..
· SOA 面向服务架构
· SQL Server 2008/2005..
· iSCSI应用与发展
· RAID——磁盘阵列基础
· Apache技术专题
· 中间件应用技术专题
· 三层交换技术专题
· SQL Server入门到精通
· Apache技术专题
· 国际文档格式标准开战
· 路由器设置与口令恢复
· 打造安全服务器
· PHP开发应用手册
· SOA 面向服务架构
· 企业数据恢复指南
ARP攻击防范与解决方案
ARP攻击防范与解..
SQL Server 2008/2005全解
SQL Server 2008/..
iSCSI应用与发展
iSCSI应用与发展
· iSCSI应用与发展
· 中间件应用技术专题
· SQL Server入门到精通
· SQL Server 2008/2005..
· SOA 面向服务架构
· Apache技术专题
· iSCSI应用与发展
· 三层交换技术专题
· Apache技术专题
· 企业数据恢复指南
· RAID——磁盘阵列基础
· 路由器设置与口令恢复
· SOA 面向服务架构
· ADSL应用面面俱到
· ADSL应用面面俱到
· 反垃圾邮件技术应用