希捷SMR技术支持百度提升冷数据存储能力

存储 存储软件
作为搜索引擎公司的巨头,百度拥有EB级别的海量数据存储,收录了相当于5000个国家图书馆的信息容量,同时承担着每天百亿次的访问请求。伴随数据规模的迅速增长,为了保障用户数据安全所做的备份、法规遵从类备份、极冷数据归档存储累积成了庞大的冷数据群体,因此急需寻求低成本存储解决方案。

 企业背景:

百度目前为全球最大的中文搜索引擎、最大的中文网站,于2000年1月创立于北京,经过十几年的不断发展,现已成为中国最受欢迎、影响力最大的中文网站。作为全球互联网行业的领头羊,百度一直肩负着引领行业技术方向的使命。在通过技术创新不断满足用户的移动搜索需求的同时,百度也在继续积极推动移动云生态系统的建设和发展,与产业实现共赢。2012年9月,百度面向开发者全面开放包括云存储、大数据和云计算在内的核心云能力,为开发者提供更强大的技术运营支持与推广变现保障,以帮助他们在移动云时代获得更好的收益和成长。

应用需求:

移动互联网、物联网的快速发展产生并积累了大量的数据,根据国际数据公司(IDC)发布的研究报告,全球所有信息数据中90%产生于最近几年,到2020年,我们将产生44ZB的数据,而互联网企业尤其是搜索引擎公司是大数据实践的先行者和领跑者。百度是中文世界主流的搜索引擎,每天响应来自138个国家和地区的数十亿次搜索请求,覆盖95%以上的中国网民,每天都在存储和处理海量的用户数据和系统数据,包括网页、图片、文档及各类音视频等,对海量数据的存储、处理与管理能力有着很高的需求,如何妥善存储庞大的冷数据信息成为了百度数据存储管理的重中之重。

解决方案:

通过合理平衡容量、性能、可用性、成本等相关因素,百度设计开发了一套针对数据分级分层存储的冰山冷存储解决方案(天蝎整机柜存储解决方案)。有效降低了数据存储的TCO。

作为冰山冷存储解决方案的一部分,在存储介质与数据管理方面,百度与希捷紧密合作,率先引入基于叠瓦式磁记录(SMR)技术的8TB归档硬盘,有效降低了每GB存储的成本与功耗。

希捷全新的8TB SMR硬盘拥有企业级可靠性,采用经过实践检验的SATA 6Gb/s接口,支持归档工作负载,并具备多硬盘抗旋转震功能,可在高密度的环境中实现一致的企业级性能,提高系统容量,借助更少的组件提高系统和人员效率,同时降低功耗成本。

目前,百度冰山冷存储解决方案已经在其自建的大型云计算中心大规模部署。

合作现状:

希捷与百度的合作由来已久,双方在2014年签署了战略合作备忘录,涉及的合作领域包括低成本在线存储、存档、数据管理与优化等。

作为搜索引擎公司的巨头,百度拥有EB级别的海量数据存储,收录了相当于5000个国家图书馆的信息容量,同时承担着每天百亿次的访问请求。伴随数据规模的迅速增长,为了保障用户数据安全所做的备份、法规遵从类备份、极冷数据归档存储累积成了庞大的冷数据群体,因此急需寻求低成本存储解决方案。

希捷归档盘针对24x7不间断运行工作负载设计,同时5900的转速可以大大降低硬盘功耗,能够可靠地节约能源,节省成本。与此同时,其8TB的总存储空间以及单碟1.33TB的容量均为业界领先,每GB成本更是突破了传统企业级近线盘的价格区间,快速的读写速度也可以满足百度毫秒级响应速度的需求。

希捷8TB归档硬盘拥有企业级的可靠性,支持归档工作负载,并具备多硬盘抗旋转震动功能,可在高密度的环境中实现一致的企业级性能,非常适合存储海量的大数据、冷数据。“百度非常高兴可以与存储领域的领军企业希捷合作,借助其业界领先的技术,可以提高我们数据中心的存储密度,更加经济有效地应对非结构化数据内容,将大量冷数据进行低成本归档存储。”百度相关业务负责人表示。

作为开放数据中心的先锋,百度不断致力于优化整机柜解决方案和降低TCO。无论是百度自建的阳泉数据中心、超高密度1U18天蝎整机柜冷存储服务器(每机柜720块盘)、还是大容量希捷8TB叠瓦式磁记录技术归档盘(每机柜5.76PB存储空间),所有这些优化方案的成功部署,都在整个行业均备受瞩目。在新兴的冷数据归档业务上,百度的成功部署,必将影响到大量的互联网公司进行跟进和学习。

叠瓦式磁记录(SMR)技术

希捷8TB归档盘实现业界领先面密度容量,这要归功于其自主研发的叠瓦式磁记录技术。作为新一代存储技术,叠瓦式磁记录对于不断提升面密度(单碟存储的数据量)具有重要作用,以促进全球云和移动应用的发展,新一代叠瓦式磁记录存储技术预计能够提升高达25%的面密度。

希捷通过叠瓦式磁记录技术使用了更少的磁头与磁碟,增强了硬盘的稳定性,并达到了新的容量点。在使用目前相同硬盘配置的磁碟与磁头时,叠瓦式磁记录也能提高存储容量,使得硬盘的性价比更高,为提升单位面积存储密度提供了一个经济实惠的途径。

愿景

百度高级技术总监刘超先生表示:“通过合理的数据分层存储,引入冷数据归档方案,可以帮助我们用更优的TCO实现数据的安全保护,对用户、对公司都具有积极的价值。通过与希捷公司合作,借助希捷可靠的存储技术和领先产品,我们可以更有效地应对云计算、大数据环境下的数据增长与存储挑战,更好的服务业务、服务用户,持续提升用户体验。”

希捷科技中国区云和企业级OEM业务总监钱亚欧表示:“作为全球存储解决方案的领军企业,希捷正在帮助中国领先的云服务和互联网供应商解决其在存储领域的痛点。很高兴百度通过采用希捷全新的8TB归档盘有效降低了冷数据存储的成本,将存储的先进技术转化为实际效益。双方的深化战略合作也将进一步巩固希捷在中国企业级市场的领导地位。”

责任编辑:小明 来源: 51CTO.com
相关推荐

2015-07-10 13:20:44

百度开放云

2020-05-29 11:03:21

IBM

2016-10-13 15:19:34

百度

2013-12-19 15:00:55

李明远移动安全

2013-09-11 10:17:10

百度云腾讯云阿里云

2014-09-03 20:33:27

2012-03-23 12:12:37

百度开发者大会

2013-08-22 17:08:50

2013-01-31 09:15:08

偷拍插件美杜莎

2014-07-25 17:12:39

数据库WOT2014MongoDB

2018-07-06 14:57:10

百度云

2018-09-30 10:58:20

云存储原理网盘

2010-08-12 15:33:00

百度笔试

2016-10-13 17:53:30

大数据

2017-04-28 19:28:39

百度技术学院繁荣技术

2012-05-28 22:51:53

百度

2015-01-18 15:16:03

百度百度移动分发百度91

2012-04-29 10:18:39

APP

2013-05-16 11:12:29

百度百度MTC录制回放客户端

2018-09-06 18:37:45

百度云
点赞
收藏

51CTO技术栈公众号