微秒级数据处理,华为云存储的“快”节奏

时间:2019-09-11 来源: 河南新闻

“以前(人们总是认为)我们写电影,我们现在不需要吹,每个人都知道我们是真正的奶牛,”华为副总裁兼华为云业务总裁郑业来最近在成都举行。华为云城城市峰会2019年“说。”

在此次大会上,华为还发布了云存储全闪存战略,并推出了该战略的第一个产品 - 新一代超快IO云硬盘,标志着华为推动云存储从毫秒到微秒。

术语微秒,我相信大多数人都没有概念。长期以来,由于网络和存储因素,在实际应用中无法实现微秒延迟或响应时间。然而,随着5G等新兴技术的发展,越来越多的智能应用开始出现 - 例如,今年3月,人民解放军总医院的医生在3000公里外操作手术器械,完成了国家。第一个基于5G的远程帕金森病“脑起搏器”植入手术。

这一成就归功于5G网络的高速率,大带宽和低延迟。由于网络已经能够提供微秒应用,因此存储介质必须迎合这一趋势,以便最大化系统性能。因此,我们刚刚推出的华为云存储全闪存战略已经出现。传统的“慢车”的出现 - 存储和网络速度,再加上计算,构成了智能时代的数据处理。 “三驾马车”。

“从几毫秒到几微秒,数据中心客户面临两大瓶颈:一是传统的硬件和软件合作,特别是网络传输延迟瓶颈;另一个是传统硬盘媒体的物理容量瓶颈。”华为云CTO张宇新介绍。 “在我们的印象中,网络延迟一直是数据处理能力的”难点“,在此期间,即使等待的时刻也会带来不良体验。另一方面,HDD存储介质的开发确实遇到越来越多的问题。如今,随着16TB容量硬盘的出现,硬盘的响应时间仍然是公众意识的重点。

面对众多客户的需求和痛点,华为云也开始从多个层面解决。针对系统级延迟,华为云通过优化软硬件架构和数据中心架构,实现了最小的网络和多核无锁并发,将软件延迟和网络延迟降低到了很低的水平。因此整个数据处理IO进出,可以实现50-100微秒的稳定延迟。对于存储介质延迟,华为云将Flash替换为Flash,将介质延迟从大约4毫秒减少到数十微秒。

当然,这不是一个简单的替代品。俗话说,对于高速Flash介质,有必要优化软件以最大化介质的性能。同时,为了尽可能地减少延迟并实现与网络延迟的一致性,有必要彻底解决硬件层面的瓶颈问题。

“传统的硬盘是物理磁盘。当提供算法时,需要考虑大圆和小圆的问题。因此,先前的算法针对物理磁头的读写性能和性能进行了优化。随意读写的比例明显较低。张玉玺说:“用Flash媒体取代后没有这样的问题。随机读写的表现非常好。但对于Flash,我们需要确保我们不会在某个位置继续频繁读写,因此该算法也需要进行调整。“为此,华为云工程师进行了大量复杂的算法优化工作在确保Flash介质的使用寿命和应用可靠性的同时,提高性能并减少延迟。

我们正处于数据爆炸的时代。在通往智能的道路上,数据已经成为我们生存的“食物”,掌握了数据的应用,我们可以把握未来的智能时代。根据华为全球行业展望(GIV)报告,2025年全球年度数据增长将增加到180ZB,但目前企业数据利用率仅为10%,且数据值尚未完全释放。如果您想使数据值得,您需要从许多方面采取措施。因此,中国也带来了“数据库”的新概念。

华为云指出,限制云计算更好地服务于智能时代的瓶颈是“最后一公里”。在云中,“最后一英里”是数据通过服务器软件,网络,存储服务器并最终到达媒体的过程。

为了实现100微秒的“最后一英里”突破,华为云从存储引擎到架构,从自主开发的芯片到算法优化,再到最终的AI祝福,做了大量的工作。其中,AI应用程序是最具吸引力的内容,也是华为云存储的来源之一。根据张玉玺的说法,华为云存储可以实现“使用速度更快”,并已成为更新摩尔定律的重要保证。然后问题就来了。我们遇到的许多电子设备都越来越慢。为什么华为云会反其道而行之?

每个人都对日常生活有深刻的理解。例如,刚购买的手机一直响应迅速。但几个月后,随着越来越多的系统浪费,手机的速度将下降,需要不断清理和优化,但这只是一个缓慢的计划。一年后,手机将卡住,打开应用程序需要几秒钟,严重影响用户体验。事实上,不仅仅是手机,所有电子产品都有类似的问题。根据“摩尔定律”,系统性能每18个月翻一番,旧系统自然会越来越不能跟上时代的步伐。

但是,基于AI的基于华为的云存储正在解决这个问题。 “在云端,随着越来越多的用户,云的业务负载越来越高,资源的竞争也越来越明显。云服务提供商可以利用良好的资源规划,通过运营及时响应客户需求。维护人员。调整和优化配置,但这个过程需要一定的响应时间。现在借助人工智能,华为云存储可以在很大程度上实现系统自动化的意识和调整,而不是通过人工干预。需要通过快速调整系统,“张玉玺说。

显然,张玉玺希望通过AI算法实现资源的自动调度,尽可能地减少延迟和性能损失,并在条件允许的情况下实现“越来越快”的效果。实现这一目标后,华为云存储还从技术层面保证了系统的最高性能,使每个硬件产品的性能尽可能地发挥,最终“接近中等能力的极限”。

微秒响应似乎有所提升,但正如张玉玺在演讲中提到的那样,普遍感知,万物智能和万物互联的时代已经到来,以加速依赖云计算和创新产业的发展。满足各种新兴应用。针对数据的实时需求,华为云将继续创新,创造新一代智能数据库,最终将云存储引入微秒时代。

新闻排行
  1. 近日,资深女演员米雪参加了妹妹罗琳的新书发布会。穿着白色连衣裙,她站在同一个年龄段的女演员中间,特别

    近日,资深女演员米雪参加了妹妹罗琳的新书发布会。穿着白色连衣裙,她站在同一个年龄段的女演员中间,特别...

  2. 文章圖片

    文章圖片...

  3. ?原沉阳大小2011.7.23我想分享7月24日沉阳停电通知停电时间:06:30-18:00停电范围:沉阳市[沉河区]长庆街78号长安路88号131,11,18-1,18A停电时间:06:30-201

    ?原沉阳大小2011.7.23我想分享7月24日沉阳停电通知停电时间:06:30-18:00停电范围:沉阳市[沉河区]长庆街78号长安路88号131,11,18-1,18A停电时间:06:30-201...

  4. 凤凰网旅游带你回顾每天不可错过的旅游资讯。1、北京发布“不文明游园行为黑名单”:攀折花木、使用超分贝?

    凤凰网旅游带你回顾每天不可错过的旅游资讯。1、北京发布“不文明游园行为黑名单”:攀折花木、使用超分贝?...

  5.   2019年5月25日,珍爱网携手北京惠通陆华汽车服务有限公司举办了汇通奇缘的童话故事轻奢相识活动,近200

      2019年5月25日,珍爱网携手北京惠通陆华汽车服务有限公司举办了汇通奇缘的童话故事轻奢相识活动,近200...

  6. ?商务部贸易工业司司长介绍了2019年上半年服务贸易的发展情况2019年8月5日,商务部贸易工业司司长介绍了2019年上半年服务进出口的总体情况。2019年上半年,中国服务贸易总额达26.12亿元(人

    ?商务部贸易工业司司长介绍了2019年上半年服务贸易的发展情况2019年8月5日,商务部贸易工业司司长介绍了2019年上半年服务进出口的总体情况。2019年上半年,中国服务贸易总额达26.12亿元(人...

  7.   20:45:55军武库  英国作为第二次世界大战的胜利国,它被称为日本帝国。第二次世界大战后,英国国力严

      20:45:55军武库  英国作为第二次世界大战的胜利国,它被称为日本帝国。第二次世界大战后,英国国力严...

  8. 1649士兵的肩章40万人逃离!叙利亚的最后一场战斗变成了绞肉机。俄罗斯故意做了什么?叙利亚,俄罗斯和伊朗将成为叙利亚战争的最终赢家。叙利亚反对派及其支持者背后的美国,以色列,沙特阿拉伯等将

    1649士兵的肩章40万人逃离!叙利亚的最后一场战斗变成了绞肉机。俄罗斯故意做了什么?叙利亚,俄罗斯和伊朗将成为叙利亚战争的最终赢家。叙利亚反对派及其支持者背后的美国,以色列,沙特阿拉伯等将...

  9. 说到三国,每个人都不仅思考三国不断的战争,还思考充满个性的人物。《三国演义》作为中国四大着名书籍之一,估计很多人从小就读过这本书,所以每次我谈到最后三个国家,即使小学生可以说几句话。里面的人物,估计

    说到三国,每个人都不仅思考三国不断的战争,还思考充满个性的人物。《三国演义》作为中国四大着名书籍之一,估计很多人从小就读过这本书,所以每次我谈到最后三个国家,即使小学生可以说几句话。里面的人物,估计...

  10. 定位紧凑型SUV的HavalH6,在该领域具有良好的销售业绩。它已经多次出现在销售清单上,许多对手想要击败它,

    定位紧凑型SUV的HavalH6,在该领域具有良好的销售业绩。它已经多次出现在销售清单上,许多对手想要击败它,...

友情链接