许良谋:闪存释放数据价值

标签:闪存存储大会

访客:24737  发表于:2014-06-19 10:14:45

主持人:感谢尤昉女士的全面分享,我们相信在业界经常听到好几个词,转型、变革、融合、定义。这些新型的词汇是我们对整个行业、趋势变化的一个总结,接下来我们要开始今天上午的主题演讲,将会有六位演讲嘉宾跟大家分享他们对当前大数据、云计算、存储发展趋势的精彩观点。之后我们还有一个高峰对话,有来自传统厂商和互联网的代表,我觉得这两方好不容易聚在一起,我们期待他们碰撞的思想和火花。这是很难得的学习交流机会,我们随后还会颁发SNW2014优秀产品和解决方案奖颁奖。下午共有两个分会场,会场外的展台将贯穿全天,大家可以进行参观。

    接下来隆重有请今天第一位演讲嘉宾戴尔(中国)有名有实亚太区存储业务部技术总监许良谋先生,他在跨国IT企业和存储领域有超过20年的丰富工作经验。在座我相信很多人听过许总的演讲,他今天的演讲题目是闪存释放数据价值。

    
    许良谋:大家好,我叫许良谋,今天很开心在这个场合里面又是一年一度见到老朋友和新朋友。我的年龄很大了,02年的时候当时花了很长时间中国真的要正规发展发展我们整个存储行业,我也是跑很多不同的厂家,我们为这个行业来做一个共同的贡献。今天很高兴参加这个盛会。
    今天我准备的话题是闪存释放数据价值,我个人的情况,以前我的笔记本都是闪存的,最近我对自己说能不能回到过去,我用了四个月普通盘了,我是坚持不下去了,我要很快换回来了。闪存的技术的确非常多的亮点,尤其是应用里面帮助我们加速。我们看为什么应用会乱,这是怪开发程序,你程序写不好还是做的不好。但是我们说IT四大技术来说,GPU,就是我们计算、内存、网络和IO,这四大块,有时候像这个图一样,CPU、内存、网络都是翻倍增长,存储从2000年,14年已经过去了,我们应该在存储方面多做一些事情,其实中间的差距非常大。
    在这里大家可以看到对比,我用349个转的盘,我用11个闪存盘,我都能够跑出类似的性能。里面其中一个更大的存储是你看一下他的功耗,349个盘要吃更多的电,2443瓦。我用13个闪存盘的话,我只有66瓦。在整个技术来说这是必须的,一定是从机械盘,我们会进入闪存盘。我们在数据里面做了优化,真正能够把两个本来是竞争对手,把他能够通过我们的读写分离的方式能把这个作为主线,等数据如果是冷却之后,我们他挪到NOC,让他也能耐读,不是耐写,我们可以把整个经济性更加降低。
    这个技术真的是能够很快,戴尔中国我们SAP某个客户做了测试,为了能够满足这个客户的要求,超过180亿条的客户记录,有很多的数据。我们要去做一个全面数据分析的话,可以看到用普通的技术性生意好的话两个小时可以跑得完。你可以用内存的方式指示你的数据库跑的快,但是硬盘拖住你的话,可以用闪存释放。当时我们做了之后,配合我们这个戴尔的闪存技术之后,每一个查询20秒钟之内可以做。400并发查询运行缩短到10分钟以内。
    另外可以看到虽然我们刚才说在这里放SLC或者是MLC,网络带宽可以进一步提升。但是中间的差距是非常大的鸿沟,我们还是差30%到40%,不是说放闪存可以拉近吗,因为CPU速度太快了。我们经过很多层,不止是网络,交换机,真正要把最后这个差距把他拉近的话,一定要把之间的距离能够拉近一点。发明更多技术,为我们业内开放。
    举个例子,这次十年存储的大改革,这个技术的出现,真正让我们充分的释放我们技术上的能力。因为以前比如说你买一个两路CPU,四路CPU无所谓,通过这个去处理,他是按照单核去计算,我们可以真正进入到多核并发。在整个十年协议的跟进,技术的绝对的延迟性,第一延迟性能够把应用速度放出来的话,我们也是看到是一个市场的趋势。另外如果我们再回到刚才的对比的话,一年是349个盘,用11个闪存盘可以满足类似的性能,今天通过NVMe闪存的技术一个就够了,功耗里面是13瓦。无论是从性能或者是功耗来说,我们相信这一次冲击是非常大的。如何应用到这个技术呢,其实我们已经完成了标配,不用浪费内部的插槽,可以在外面放置我们的NVMe的闪存盘。两个过渡的话可以加第三个或者是加第四个让他去提速。整个IT业界绝对不会只有存储,我们应该要做什么东西?整个业界来说其实每个人都是在不断的去创新。
    回到刚才我们所说IT就是我们所谓四大技术,计算、网络、内存还有IO,这四方面在这几年有非常大的突破。在IO层通过NVMe方式,我们能够真正去做到多核并发,这次存储和IO不再是外挂式,我们通过NVMe读回来,写出去的东西可以直接存放到里面。所有在我们做这个体系的时候,IO不再是外挂式,可以进入我们CPU,以前只有内存才有这个机会。在在网络里面,四万兆你都在降价,有一些企业在看到,所以网络冲击很大。
    另外内存里面,我们看到之前我们要做多级点,以太网络在这几年,尤其是过去这三年通过万兆我们的DCB,能够把不可动的以太网络变成可动的以太网络。我们看到他在高速的网络里面,他的应用在多级点之下,通过低延迟协议的话,他也绝对能够做到让我们非常满意的地方。
    另外一个是在计算方面,我们也看到很多企业从当年可能是24级收缩,应用如何保持高频率性。我们很快进入这个集群,大家都是用横向扩展的集群。整个市场也开始进入集群3.0的技术,里面不再只是说存储是可分可共享,我们可以建立更多的共享层。这是存储积累,有不同的跟进。在计算里面、网络里面、内存里面还有IO里面有不同的发展。我们今天的主题一样融合是一个开始,如果能够把这些新的东西,无论是协议还是硬件发挥得好。戴尔希望把这些新协议和这些硬件全部能够合二为一,真正为老百姓做点事,把我们的业务和应用加速。这也是为什么戴尔在去年10月份我们全球宣布我们这次退市,变成一个私立公司,我们希望发明更多新的技术,时间很巧,都是汇集到一起,我们如何把他全部用好。不是软件定义所有的一切,我们戴尔相信软硬共生。软件做的再好,也需要硬件配合。我们戴尔相信是一个如果应用需要加速的话,能够真正把CPU力量发挥出来,我们可以给他一个新的概念,就是这个缓存。我们希望应用能够更加把我们的业务发挥得淋漓尽致。
    在北京保险行业的例子,当时他们做一个CRM,把这些Pad(BYOD)下放给我们的销售,你可以给客户介绍这些什么内容,怎么下单等等。这是行业的发展,这是宏观的计划。这是去年年初的计划,比如说下放5到10万的Pod全国到处跑,服务整个客户。后来马上开了一个评级,早上9、10点的时候,销售说帮公司赚更多钱的时候,每秒并发数量1500的时候,并发速度一到两千,这个就不可以再用了。我应用无法支撑这个业务的话,也是没有办法。
    这两台小机跑,今天中国也是几乎每天每星期都在说去IOE,是不是把小型机拿走呢?全部换成X86的平台,这句话说很轻松,但是这个企业把所有业务逻辑都去掉,这是不可想象。把一个很成熟,大家懂得怎么管理的Liunx,就算可以做,也不是短期做的。曾经他们在考虑如果要把CRM系统做的好的话,是不是要升级硬件,是不是要增加更多的节点等等。我们进去之后,我们发现他这个应用实际上瓶颈是在数据库,没办法平衡,我们看到的情况是数据库已经成为严重的瓶颈了。
    我们知道在国内和国外我们有很多云架构,无论是腾讯、阿里巴巴、淘宝等等,大家都是用不同的新的架构来去满足他的这个应用。这里可以看到无论是对外层或者是中间的软件层,或者是底层都有不同的方式可以做容错或者是均匀负载。我们跟客户说不是把云架构拿进来,云架构拿进来给一个企业,对传统企业是一个很大的冲击,你可以考虑他的做法。举个例子,为什么这个公司数据可以起来,数据库级别做一个读写分离,这是一个互联网公司为什么能做到上千、上万、上亿人都是不同的负载均衡。
    最后我们给他的建议就是数据库把他作为一开四,有自己专门的写值,读值,整个下来,你不需要把很成熟的应用做任何的取舍,你可以在这里加一个集群,让他能够去提速。这是去年年终的时候他们看到整个体系现在就算去掉并发量9000每秒都没问题。一分四做处理,五秒钟之内做完了,这是客户很满意的方案。
    但是和大家说一下,存储加上闪存加上我们大家说的PCI(音)的技术,我们看一下这个PCIE(音)。这是我们作的测试,用八个节点接一个闪存的话。我们去年双11,淘宝当天350亿成交量,每分钟他的并发处理能够79万次,乘以60秒,每一秒他的并发能力能够处理11870/秒。闪存的技术能够用到CPU并发的话,我们不需要上千台,我们用八个节点就可以。
    我们今天都说大数据,整个大数据的年代已经来了,但是大数据分很多块,我们需要更大的容量。数据管理再复杂,怎么继续,基本上也有解决方案。这个能够推动大数据里面,我们说数据科学家,我们也不赞成国外引入很多专家,大数据的年代在中国已经来临。
    如果整个大数据在分析数据的时候,不是两个小时,一个小时或者是秒级别给你,而是等两个星期之后才给你。这个做法,速度不能提速,基本上不可以叫做大数据。因为体验带来一切,只有闪存才能真正释放数据的力量。谢谢。

评论(0)

您可以在评论框内@您的好友一起参与讨论!

<--script type="text/javascript">BAIDU_CLB_fillSlot("927898");