【AI实战】最强NLP预训练模型库PyTorch-Transformers正式开源!支持6个预训练框架,27个预训练模型
555
2022-05-28
虽然我们已经进入大数据时代,但多数企业数据利用率只有10%,数据的价值没有得到充分释放。面对海量数据爆炸式的增长和发掘数据内在价值的巨大需求,拥有弹性伸缩、无限扩展能力的云存储正发展成为时代的智能数据底座。
另一方面,随着人工智能(AI)、VR/AR、5G、自动驾驶等技术的发展,应用对云存储的实时处理能力提出了更高标准。对于支撑智能世界的数据平台而言,需要进入百微秒量级,才能满足实时性要求。
最近,华为云发布了新款极速型SSD云硬盘,可以充分满足AI、AR/VR、数据库、大数据、HPC等高性能低时延业务场景需求。
通过对架构和算法的创新,华为云打造了拥有四大硬核技术的华为云All-Flash智能数据底座,从容应对云、AI、5G时代数据存储的挑战。
All-Flash智能数据底座:100%存储卸载能力
华为云All-Flash智能数据底座
首先,基于华为云擎天架构,华为云实现了100%的存储卸载能力和零损耗的存储虚拟化。基于RDMA的高速存储网络,能充分发挥NVME 存储集群的性能,搭配租户级QoS能力,可以为用户提供极速和稳定的云存储底座。
新一代的Flash-Native存储引擎,采用了Append的数据布局、智能全局FTL、支持全局磨损均衡、智能垃圾数据回收等全新技术,大幅减少SSD写放大,使得SSD寿命提升5倍以上,可靠性达到了11个9。动态低时延Flex EC专利算法,保证数据写入路径最优,达成百μs级延迟。华为在软件和多核调度处理的丰富技术积累,解决了多核带来的锁开销,使得数据并发访问性能提升了100倍以上。
下一代低时延CurreNET网络技术,支持免 PFC 的全云规模部署,原生支持虚拟化,同时支持标准 verbs 和 socket 接口,以及应用自定义的通信语义卸载。通过该技术,华为云达成了云存储单集群10万节点部署能力,单节点网络带宽达400Gb,P999长尾时延降低90%。
另外,还需要强调的是华为云云存储的安全可信技术,通过专用硬件实现端到端全路径DIF,让云硬盘中的数据零差错,基于擎天卡实现数据全路径加密,并且支持BYOK客户自带秘钥加密,确保数据安全零泄漏。
这个SSD,让AI模型迭代从1周缩短到1天
华为云极速型SSD性能领先
在性能表现方面,极速型SSD云硬盘相比当前热卖的超高IO产品性能提升3倍以上,而相比其他云厂商同类型产品依然保持着性能领先,其单盘带宽高33%,IOPS高28%。
更好的性能必然能为更多创新应用带来成倍的效率提升,在AI训练场景方面,极速型SSD可以让华为小艺AI模型迭代周期从1周降低到1天;在AR场景下,华为河图通过极速型SSD实现了在毫秒级时间内达成厘米级定位和1度以内定姿,用户体验无比流畅。而在应用更广泛的MySQL数据库场景下,华为云极速型SSD更能带来平均3倍左右的性能提升。
这款新一代的极速型SSD云硬盘将于8月30日正式商用。
如果有更多云存储需求,不能错过华为云828企业上云节,选择和业务场景最匹配的云存储产品。
企业上云节 云硬盘 EVS 云存储网关 CSG 华为云828
版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。