Active存储知识:未来存储技术的发展是什么样的

2020-09-22 13:47

未来的存储技术会是什么样子呢?对于基于NVMe的传统Flash技术,我们应该继续期望更高的容量。例如,在QLC NAND技术之后会出现什么?只有时间才能告诉我们答案。下一代NVMe规范将引入跨更多PCI Express通道和更高带宽的协议标准。随着存储技术的继续发展,插入计算机的存储技术也将随之发展。


请牢记一点:最终目标是更接近CPU并减少访问时间(即延迟)。

内存存储类

多年来,供应商一直在开发一种可以将非易失性内存插入传统DIMM插槽(易失性DRAM使用的插槽)的技术。存储类内存(Storage Class Memory,简称SCM)是一种较新的混合存储层,它不是确切的内存,也不是确切的存储。它离CPU更近,有两种形式:

1)由大电容支持的传统DRAM存储数据到本地NAND芯片(例如,NVDIMM-N)

2)一个完整的NAND模块(NVDIMM-F)。

第一种情况下保留了DRAM的速度,但没有足够的容量。通常,基于DRAM的NVDIMM容量小于最新的传统DRAM。供应商如Viking Technology和Netlist是基于DRAM的NVDIMM产品的主要生产商。

而第二种将为您提供更大的容量,但它没有DRAM速度快。在这里,您将发现固定在传统DIMM模块上的标准NAND与现代SSD中的NAND完全相同。

这种类型的内存不作为传统内存注册到CPU,根据DDR4标准,现代主板和处理器不需要任何特殊固件就能够使用这种技术。当操作系统加载到包含此类内存的系统上时,它将其隔离为“protected”模式类别(例如0xe820),并且不会像标准的易失性DRAM那样使用它。相反,它将只通过驱动接口访问内存(非易失性内存就是这个接口)。使用这个模块,您可以将这些SCM设备的内存区域映射到用户空间可访问的块设备中。

当前的应用程序将SCM用于内存数据库、高性能计算(HPC)和人工智能(AI)工作负载,也将其用作持久缓存。随着NVMeoF的不断成熟,它将允许跨存储网络导出SCM设备。

英特尔的Optane,三星的Z-SSD等

介于DRAM和传统SSD之间的是一些新兴技术,如英特尔的Optane(最初是与美光合作开发的,被命名为3D-XPoint)和三星的Z-SSD。这些技术非常新,除了它们既不是DRAM也不是NAND之外,人们对它们知之甚少。就英特尔的Optane来说,它是一种新的非易失性存储技术,基于相变存储器(PCM)。Optane的性能比NAND更好,但比不上DRAM。另一个优点是它比NAND SSD具有更好的电池寿命——也就是说,与标准的NAND SSD相比,它每天能够执行更多的驱动器写入操作(DWPD)。

计算存储

通常,应用程序和它需要访问的数据之间引入的延迟太长,或者托管该应用程序所需的CPU周期在主机上消耗了太多资源,从而给驱动器本身引入了额外的延迟。怎样才能避免这些负面影响呢?答案之一是将应用程序移动到物理驱动器本身。这是最近才出现的趋势,被称为计算存储。

上述技术的前沿的是NGD系统,ScaleFlux,还有三星。那么,什么是计算存储?它是如何实现的呢?

其思想是将数据处理定位到数据存储层,避免将数据移动到计算机的主存储器(最初由主机CPU处理)。在传统系统上,需要资源将数据从存储位置移动、处理,然后将其移回相同的存储目标。整个过程需要花费时间,并引入访问延迟——如果主机系统正在处理其他任务,情况就更严重了。此外,数据集越大,移入/移出所需的时间就越多。

为了解决这个问题,一些供应商已经开始将嵌入式微处理器集成到他们的NVMe SSD的控制器中。处理器将运行一个标准的操作系统(如Ubuntu Linux),并允许一个软件在SSD上本地运行,以便进行现场计算。

面临的挑战

HDD继续优于SSD技术的另一个方面是跨标准形态的能力。您的标准服务器只能容纳这么多的存储。而且,硬盘的可选择空间要比SSD大得多。随着内存技术的发展,这种情况在未来几年可能会发生变化。

另一个SSD的困难之处是软件应用领域。许多软件应用程序不符合访问NAND存储器最优的方法。这些应用程序将增加驱动器访问延迟,同时减少NAND单元寿命。

总结

由于涉及到内存技术,未来看起来很有前途,同时令人兴奋。那么SSD会完全取代传统的HDD吗?我对此表示怀疑。看看磁带技术,它仍然存在,并继续在档案存储中找到自己的位置。HDD很可能会有类似的命运。尽管在那之前,HDD将继续在价格和容量上与SSD竞争。

北京博恒视创科技有限公司是一家专业多媒体存储系统集成商。我公司联合美国Active Storage公司共同开发了Active媒体私有云共享系统、满足4k视频剪辑和大型真人秀节目制作的Active Storage光纤存储在线实时剪辑系统、满足每天100T的源数据同城或异地的数据分发与共享的远程数据复制与内容分发系统。8K电影全流程跨平台共享实时剪辑系统,现场实时调色及DIT管理系统,影视素材归档备份管理系统、海量数据自动化迁移保存系统、全媒体制播网系统等多种完全“订制化”的解决方案。2018年本公司开发出一套完整的数据安全保存系统,以“在线编辑,近线备份,离线保存”的三维立体式的解决方案,让客户数据在“生命周期”内安全的保存,没有后顾之忧,我们始终将客户的需求放在第一位,持之以恒,坚持创新,引领产品走向高容量、高带宽、高集成和人工智能化。


大型真人秀后期非编网部分成功案例:

深圳卫视《加油吧,新郎》、爱奇艺《流行之王》、北京卫视《歌手是谁》、湖南卫视《完美假期》、江西卫视《带着爸妈去旅行》、央视三套《幸福账单》、央视三套《急速少年》、湖南卫视《旋风孝子》、湖南卫视《妈妈的牵挂》、安徽卫视《国剧盛典》、安徽卫视《合唱先锋》、腾讯《拜托了冰箱》、黑龙江卫视《嘿,大兄弟》、山东卫视《家游•好儿女》、江西卫视《七天爱上你》、芒果TV《透鲜滴星期天》、CCTV《警察特训营》、爱奇艺《大学生来了》、爱奇艺《娜就这么说》、爱奇艺《我去上学啦》、浙江卫视《喜剧总动员》、芒果TV《黄金单身汉》、芒果TV《香蕉打卡》、芒果TV《不一样的偶像》、江西卫视《玫瑰之旅》、浙江卫视《开心俱乐部》、优酷《火星实验室》、内蒙古卫视《嗨,马上出发》、芒果TV《爸爸去哪儿》、芒果TV《我是大侦探》、央视《朗读者》、湖南卫视《我家那小子》、湖南卫视《幻乐之城》、湖南卫视《亲爱的客栈》、腾讯视频《创造101》、爱奇艺《偶像练习生》《青春有你》,湖南卫视《中餐厅》《亲爱的客栈3》等等真人秀节目后期机房


欲了解详情,欢迎咨询

魏 明

-------------------------------

电话: 18611689687(同微信号)

Add: 北京市朝阳区三间房东路一号懋隆文化产业创意园34栋

网址:www.active-storage.com.cn

本文为作者 魏明 分享,影视工业网鼓励从业者分享原创内容,影视工业网不会对原创文章作任何编辑!如作者有特别标注,请按作者说明转载,如无说明,则转载此文章须经得作者同意,并请附上出处(影视工业网)及本页链接。原文链接 https://cinehello.com/stream/130949