谁能支持探寻"上帝粒子"的海量数据存储

标签:安全存储

访客:23390  发表于:2012-12-11 16:31:03

2012年7月4日,欧洲核子研究中心(CERN)宣布发现了“上帝粒子”的存在。在这个让霍金都赌输了的激动人心的发现背后,有无数科学家多年来孜孜不倦的探索,还有难以想像的海量科研数据的分析研究,这些都离不开数据存储系统的支撑。
著名的物理学家霍金曾经押了100美元,赌“上帝粒子”不存在。但是,霍金也许输了!2012年7月4日,欧洲核子研究中心(the European Organization for Nuclear Research,简称CERN)的人员激动地宣布,ATLAS和CMS两个通用大型实验结果显示,在125吉电子伏特(GEV)的质量附近发现了一颗新粒子,其特性类似于粒子物理学界一直努力寻找的“希格斯玻色子”,也被称为“上帝粒子”。这表明人类在理解自然世界上进入了一个崭新的阶段。
发现“上帝粒子”的背后
CERN是世界上最大的粒子物理研究组织,是全球资讯网(www)的发祥地,总部位于瑞士,聚集了世界粒子物理学领域一半以上的科学家。为满足高能物理学研究的需要,CERN设立了处理能力很强的大型网格计算中心,协助实验数据的分析。
由于拥有全球大型强子对撞机(LHC:Large Hadron Collider)系统计算网格中唯一的0级(最高级)数据中心,CERN每年有超过20PB的关于大型强子对撞机的研究数据需要存储和分析。为了日常研究工作的顺利开展,CERN和全球领先的ICT公司合作,组建了具有合作伙伴关系的独立组织OpenLAB(开放实验室)。
OpenLAB的任务是推动尖端IT解决方案的发展,并将其应用在世界范围内的大型强子对撞机系统中。近年来,持续快速增长的海量科研数据对CERN的存储系统在可扩展性、可靠性等方面,提出了严峻的挑战。因此,在2011年,OpenLAB开始为CERN评估新的存储技术。从OpenLAB的具体分析来看,CERN在海量存储领域的挑战主要体现在以下几个方面。
首先,CERN的研究成果是全球超过7000名顶尖工程师的劳动结晶,多年来积累了近1600万次珍贵的碰撞数据,这要求存储系统具备值得信赖的可靠性。
其次,CERN的科研数据一直呈现出高速增长的态势,比如2007年的数据总量是约7PB,2009年达到了15PB,2012年会高达25PB。面对未来持续高速增长的海量数据,CERN的存储系统必须要有超强的系统扩展性。
第三,科学家们在进行研究和分析时,需要不断地从海量数据中快速进行检索和读写,这对存储系统的吞吐性能提出了较高的要求。
第四,CERN的数千名工程师的工作模式是分工协作,使用的数据也是隔离的,而且要求全球多个科研机构的数据中心的资源能够共享,所以存储系统在共享性能和安全性上应提供必要的支撑和保障。
UDS:存无止境,安全可信
2012年1月,CERN OpenLAB宣布将开展更为丰富的跨合作伙伴的活动,并在自动化及控制、数据库、网络和平台等领域尝试新的项目,数据存储系统是其中的重要部分。
华为拥有业界领先的存储专家和卓越的技术经验,致力于下一代云存储领域的创新,成为了CERN OpenLAB的合作伙伴,将与CERN一起探索如何迎接未来EB级数据存储的挑战。对此,华为提供了UDS(Universal Distributed Storage)海量云存储系统。
UDS海量云存储系统基于ARM架构的低功耗、高密度存储节点,通过对象存储技术、P2P分布式存储引擎技术、集群应用技术等,构建海量对象存储的基础架构平台,可提供各种类型数据的存储、共享服务,具有EB级扩展、安全可靠、高效融合等特性。
UDS具有EB级扩展性能,可实现从100TB到1,000,000 TB的灵活扩展,还能智能调整节点负荷,打破系统瓶颈,使系统性能随容量均衡增加。
UDS支持跨数据中心的冗余策略,使系统可靠性高达99.999999999%。同时,UDS采用从节点、系统到数据中心的多层级保护策略,以及多副本和Erasure Code技术,并在接入、存储、传输层面多层加密验证,确保了数据在整个生命周期内的安全可靠。
高效融合特性体现在UDS的超高性价比,及丰富的接口和良好的兼容性。UDS支持桌面级硬盘;故障可智能自动修复,不用即时维护;采用的ARM芯片,功耗更低;制冷策略也更高效节能,这些都能够有效降低存储系统的建设和维护成本。另一方面,UDS兼容S3接口,支持NFS/CIFS等协议,提供E2E公有云服务,兼容主流的备份软件,可满足不同类型应用对存储系统的访问需求。
迎接未来更大的挑战
2012年初,华为UDS海量云存储系统交付到CERN,并在三个月内完成安装调测和基准性能的评估。从2012年4月份开始的连续三个月的严苛的性能测试中,UDS在大规模数据环境中,表现出卓越的读写性能和极佳的可扩展性。该系统还展现出智能的自我修复功能,大大降低了维护成本,有效地提高了存储系统的可用性和可靠性。测试结果充分表明,UDS创新的软、硬件非常适合CERN海量数据存储的业务要求。
“CERN在执行数据密集型模拟和分析方面正在面临极限,与华为的合作为我们展现了一个令人激动的新路径。华为云存储优良的架构设计,使得CERN能够轻松应对未来EB级数据量存储和处理的挑战。”CERN OpenLAB的总负责人鲍勃·琼斯高度评价道。
华为云存储首席架构师詹姆斯·休斯表示:“与CERN OpenLAB的合作给了我们一个绝佳的机会,来进一步发展我们的云存储产品,同时也证明了UDS创新的架构设计在极端的科研和海量数据环境的价值。”
CERN寻找到上帝粒子仅仅是个开始,在此基础上的研究将揭开充斥在宇宙中的暗物质的神秘本质。所有这一切,都将对人类探索宇宙起源及未来,提供新的契机。展望未来,UDS海量存储系统将肩负重任,力争为这一系列科学研究背后的海量数据分析和处理,作出更大的贡献。

评论(3)

您可以在评论框内@您的好友一起参与讨论!

    1. 张卡尔 “成为了CERN OpenLAB的合作伙伴”?这个有点问题的啦。根据OpenLAB的网站,华为是贡献者级别。
      惠普、英特尔、甲骨文和西门子是伙伴级别。各位CIO们,这就是厂商营销的经典手法的一个鲜活案例。
      这里的合作伙伴,也可以理解成只是在同OpenLAB合作。这个含金量就不那么大。也可以认为是OpenLAB
      特别授予了伙伴的称号,这个含金量就要高一点。华为到底是是哪一种呢?

      回复[0] 2012/12/11 19:16

    1. 徐蕊 真专啊,CIO看过来。

      回复[1] 2012/12/11 17:03

    1. 姜稳 关心存储的人们看过来!

      回复[0] 2012/12/11 16:53

<--script type="text/javascript">BAIDU_CLB_fillSlot("927898");