Active存储知识:磁带库才是未来可靠的存储设备?

2020-08-26 10:55

存储容量越来越大,现在已经引起担忧了。最担忧人类前途的组织联合国预计,按世界人口的需求计算,在 2050 年现有的数据储存系统就撑不下去了。


数据存储的增长越来越快,正迫使人类寻找更好的数据储存技术。有科学家尝试用 1 公斤 DNA 储存全球数据,想想就很难,DNA生物科技的东西也太娇嫩了,太容易损坏。微软则研发出可以号称可以使用上千年的「玻璃光盘」,但是读取速度令人堪忧。


难道就没有物美价廉安全可靠的存储媒介了?据了解,当今世界上技术最先进的科技公司还在使用磁带储存数据,你敢信?


在很多人印象中,磁带仿佛是上个世纪的古董了。磁带,晶体管收音机,大哥大,当年的时尚界的标配。只怪科技发展太快了,有种穿越的既视感。随着 CD、MP3、智能手机相继在音乐市场上各领风骚,日新月异,磁带也成了回忆。磁带在生活中难觅踪影。


可磁带并没有死,反而在大数据时代和未来成了最具竞争力的储存介质。物美价廉耐用还安全。就是读起来稍微慢些。1 TB 容量的移动硬盘售价约为 50 美元,相同容量的磁带的价格仅需 5 美元。简直不要太便宜。


磁带比硬盘要耐用,一般硬盘用个10年8年就不行了,每隔几年就要复制到新硬盘中,海量的数据的复制不止耗时,而且还容易丢失数据,麻烦的很。而磁带则可以保存数十年。维护简单,在使用过程中磁带只需要插在机械磁带库的插槽中,不需要耗电。


磁带很安全,磁带不安装驱动就无法访问,这种离线状态隔绝了黑客和网络攻击,不容易丢失和被篡改,自带反黑神技,对安全有需求的公司都在悄悄的大批使用。比如银行、保险公司、国家档案馆,以及科研机构,其中就包括美国国家航空航天局(NASA)。


最近,因为大数据与AI技术崛起,企业生成海量数据,涉及业务的方方面面。金融监管部门提出要求,机构的数据必须保存更长时间。正因如此,企业与机构存储的数据越来越多。


研究报告证实,每年存储的数据都在以30-40%的速度增长。与此同时,硬件容量也在增长,但是增长速度低了一半。还好,许多信息并不需要即时访问,如果想存储此类数据,磁带是一个完美的选择。


事实上,有许多数据就是用磁带存储的,包括基础科学数据,比如粒子物理学、射电天文学、人类文化遗产、国家档案、重要电影、银行、保险、石油勘探等数据。有一批人正在寻找办法提高磁带的存储能力。


磁带其实早就出现了,磁带技术没有停止前进的步伐,完全相反,就像硬盘和晶体管一样,在过去几十年里,磁带技术进步神速。


第一个商用数字磁带存储装置叫作Model 726,是IBM开发的,一卷磁带可以存储1.1MB数据。到了今天,一卷现代磁带可以存储15TB数据,一个磁带库可以存储最多278PB数据(1PB=1024TB)。如果用CD光碟存储这么多的数据,需要3.97亿张,将这些光盘叠在一起高度超过476公里。怎么换算的?278PB相当于291504128GB,一张普通CD光盘容量约为700MB,算下来大约就是3.97亿张了。


与硬盘 、半导体存储装置相比,磁带的访问速度的确慢很多。但是,作为存储媒介,磁带的优点相当多。首先,磁带更节能,一旦数据被磁带记录,就会放进磁带库,静静躺着,不会消耗任何电能。其次,磁带相当稳定,出错概率比其它存储设备低4-5个量级。再次,磁带非常安全。如果磁带没有插入驱动器,数据无法访问,无法修改。现在网络攻击流行,数据老是被窃取,这一特点相当吸引人。


1951年电脑第一次用磁带记录数据


有时软件会出现漏洞,伤害数据,磁带具备离线特点,所以可以提高防御能力。例如,2011年,因为一个软件升级,谷歌误删除4万个Gmail帐户邮件信息。虽然谷歌在硬盘中存储数据,放在多个数据中心,但是还是丢失了信息。幸好,数据同样存储在磁带中,谷歌可以从备份中恢复数据。



2011年的Gmail事故告诉我们:云服务提供商谷歌正在使用磁带。最近,微软告诉外界,它的Azure Archive Storage系统用到了IBM磁带存储装置。


虽然有着这样那样的优点,不过企业之所以使用磁带,主要还是因为成本低。同样大的数据,如果用硬盘存储,成本是磁带的6倍,所以你会发现,凡是需要存储大量数据的地方,都会用到磁带。因为在消费产品中已经看不到磁带的身影,所以大家才会认为它已经消失。最近几年磁带存储技术取得了很大进步,在可预见的未来,它还会继续进步。


总之,在过去几十年里,磁带一直没有远去,未来几十年也不会消亡。为什么如此确定?请继续阅读。


之所以断言磁带会有很长的生命力,主要出于一个原因:便宜。事实上,磁带越来越便宜。


现代LTO(线性磁带开放试技术)磁带


你可能会认为,一旦人类无法再向磁盘挤入更多数据,磁带同样无法做到,因为它所使用的技术与磁盘基本上是一样的,只是更加古老。然而现实却让我们大吃一惊,磁带的容量一直在提升,而且没有止步的迹象。每年增长33%,这是历史数据,而且这一速度有可能会保持下去。换言之,每隔2-3年,磁带的容量就会增加一倍。你可以将它当成是磁带的“摩尔定律”。


数据已经爆炸,在存储预算保持不变的前提下,磁带容量不断提升是一个好消息。如果你想更好理解磁带的潜力,可以看看硬盘,看看磁带与硬盘是怎样进化的。


磁带与硬盘用相同的物理技术存储数据。简单来讲是这样的:在磁性材料薄膜中有许多很窄的轨道,磁性材料的磁性在两种极性之间转换。信息用二进制位编码,在轨道上的某一个特定点通过磁性转换与否来体现。1950年代磁带和硬盘出现,然后制造商就按照“更密、更快、更便宜”的路线前进。最终,两者的成本都下降了很多——按照每GB成本计算。


之所以成本大幅下降,主要是因为我们可以在每平方毫米的磁盘基片上存储更多数据。磁录密度由两个因素决定:一是磁道上存储的数据密度,二是垂直方向的磁道密度。


1952年推出的IBM 726,只能存储几MB数据,最开始时,磁带和磁盘的磁录密度差不多。因为硬盘销量更多,市场更大,所以企业可以投入更多研发资金,导致硬盘市场进步更快。到了今天,高容量硬盘的磁录密度大约是新磁带的100倍。


尽管如此,因为磁带的存储表面面积更大,所以先进的磁带可以存储最多15TB的容量,比大容量硬盘高很多。考虑到两款装置所占的体积差不多,所以优势更明显。


除了容量,磁带和硬盘的特点也有很大不同。磁带很长,一般有几百米,所以访问数据的平均时间约为50-60秒,而硬盘只有5-10毫秒。不过数据写入磁带的速度约为硬盘写速度的2倍多。


以前,硬盘磁录密度会以每年40%的速度提升,但最近几年却降到了10-15%。为什么?主要是因为受到了物理学的限制:在给定区域存储的数据越多,每一个Bit能调配的空间就会越小。这样一来,当你读取数据时信号就会越弱。如果信号过弱,可能会在噪音中丢失,磁性颗粒涂在盘片上,本来就会有噪音。


缩小颗粒,降低背景噪音,完全有可能做到。但是当颗粒到了一定大小,想要继续缩小,而且还要保持磁性稳定,就会变得很困难。磁记录的最小尺寸被称为超顺磁极限(superparamagnetic limit)。现在硬盘制造商已经触及极限。


就在不久之前,消费者还感受不到放缓的迹象,因为硬盘制造商可以为单个单元增加更多磁头和盘片,让相同尺寸的硬盘进一步扩大容量。现在呢?空间受到限制,增加更多磁头和盘片的成本进一步增加,厂商无法获得很高的收益,而且这种限制越来越明显。


厂商正在开发几种技术,这些技术也许可以帮助硬盘打破超顺磁极限,一种技术叫作热辅助磁记录技术(HAMR),还有一种叫作微波辅助磁记录技术(MAMR),这些技术使用的颗粒更小,允许磁盘以更小的区域磁化。


不过这些新技术会抬高成本,在工程上也面临很大挑战。即使成功,大规模量产也是一个问题。例如,西部数据最近宣布说,2019年将会出货MAMR硬盘,照估计,有了MAMR技术,磁录密度会以每年15%的速度提升。


现在的磁带库可以存储几百PB数据,反观磁带,现在它的磁录密度离超顺磁极限还有很远距离。所以说磁带的“摩尔定律”可以继续存活10年甚至更长时间,不会碰到障碍。


不要认为磁带技术就很简单,不是的。磁带天生具有可以擦除的属性,而且使用超薄聚合物基质,以并行方式同时记录的磁道高达32条,这些都给设计师带来很大挑战。正因如此,IBM团队才会寻找各种办法提高磁带容量,有时会引入硬盘技术,有时会寻找新方法。


想达成目标,有几个技术障碍要跨越。例如,当磁带的磁道变得越来越窄,必须改进读写磁头,新技术显示,磁道的宽度已经可以降到100纳米左右。


研究人员还要缩小数据阅读器(它是一个磁阻传感器,用来从磁道上读取已存入的数据)的宽度,目前的宽度用微米计算,有必要降到50纳米之下。到了这一步,我们会用超小阅读器读取信号,此时会有很大的噪音。怎么办?我们可以通过提升信噪比来改进,改变磁性粒子的尺寸和方向、改变组成成份、改变磁带表面的平滑度和厚度来实现。未来,我们还可以引入信号处理技术和纠错技术,进一步提升性能。


一旦新品到来,必须确保数据能够存储几十年不丢失,为此,研究人员会在记录层优化磁颗粒,让它们更稳定。不过这样做会有副作用,它会导致最开始时记录数据变得更困难,从某种程度上说,普通磁带传感器无法将数据写入新介质。所以研究人员需要发明新磁头,能够产生更强的磁场,这样才能写入数据。


将多种新技术结合在一起,研究人员开发出实验系统,它的线密度达到每英寸818000比特(bits)。出于历史原因,磁带工程师会用每英寸数据密度来描述磁带存储能力。引入新技术,每英寸可以有246200条磁道,换算一下,相当于每平方英寸可以存储201GB数据。假设一盒磁带的长度是1140米(这种假设是合理的,因为磁带的厚度会降低),一盒磁带可以存储330TB数据。


2015年,信息存储行业协会(Information Storage Industry Consortium)与众多研究机构发布一份报告,按照预测,2025年之前磁带的磁录密度可以达到每平方英寸91GB。如果趋势能够保持,2028年之前就会超过200GB。


报告对磁带存储的未来很乐观。实验证明,每平方英寸达到200GB是完全可能的。所以说,在未来10年里,磁带技术还会继续进化。


在信息技术领域,可能只有磁带技术还会遵守摩尔定律一样的发展轨迹,在未来10年里继续下去。在硬盘及其它存储技术面前,磁带本来就有成本优势,未来这种优势会进一步扩大。你也许很少看到磁带,只在老电影中看到过,但是磁带技术实际上并没有落伍,未来很多年都不会落伍。

北京博恒视创科技有限公司是一家专业多媒体存储系统集成商。我公司联合美国Active Storage公司共同开发了Active媒体私有云共享系统、满足4K视频剪辑和大型真人秀节目制作的Active Storage光纤存储在线实时剪辑系统、满足每天100T的源数据同城或异地的数据分发与共享的远程数据复制与内容分发系统。8K电影全流程跨平台共享实时剪辑系统,现场实时调色及DIT管理系统,影视素材归档备份管理系统、海量数据自动化迁移保存系统、全媒体制播网系统等多种完全“订制化”的解决方案。2018年本公司开发出一套完整的数据安全保存系统,以“在线编辑,近线备份,离线保存”的三维立体式的解决方案,让客户数据在“生命周期”内安全的保存,没有后顾之忧,我们始终将客户的需求放在第一位,持之以恒,坚持创新,引领产品走向高容量、高带宽、高集成和人工智能化。


大型真人秀后期非编网部分成功案例:

深圳卫视《加油吧,新郎》、爱奇艺《流行之王》、北京卫视《歌手是谁》、湖南卫视《完美假期》、江西卫视《带着爸妈去旅行》、央视三套《幸福账单》、央视三套《急速少年》、湖南卫视《旋风孝子》、湖南卫视《妈妈的牵挂》、安徽卫视《国剧盛典》、安徽卫视《合唱先锋》、腾讯《拜托了冰箱》、黑龙江卫视《嘿,大兄弟》、山东卫视《家游•好儿女》、江西卫视《七天爱上你》、芒果TV《透鲜滴星期天》、CCTV《警察特训营》、爱奇艺《大学生来了》、爱奇艺《娜就这么说》、爱奇艺《我去上学啦》、浙江卫视《喜剧总动员》、芒果TV《黄金单身汉》、芒果TV《香蕉打卡》、芒果TV《不一样的偶像》、江西卫视《玫瑰之旅》、浙江卫视《开心俱乐部》、优酷《火星实验室》、内蒙古卫视《嗨,马上出发》、芒果TV《爸爸去哪儿》、芒果TV《我是大侦探》、央视《朗读者》、湖南卫视《我家那小子》、湖南卫视《幻乐之城》、湖南卫视《亲爱的客栈》、腾讯视频《创造101》、爱奇艺《偶像练习生》《青春有你》,湖南卫视《中餐厅》《亲爱的客栈3》等等真人秀节目后期机房


欲了解更多,欢迎咨询

魏 明

-------------------------------

电话: 18611689687(同微信号)

Add: 北京市朝阳区三间房东路一号懋隆文化产业创意园34栋

网址:www.active-storage.com.cn

本文为作者 魏明 分享,影视工业网鼓励从业者分享原创内容,影视工业网不会对原创文章作任何编辑!如作者有特别标注,请按作者说明转载,如无说明,则转载此文章须经得作者同意,并请附上出处(影视工业网)及本页链接。原文链接 https://cinehello.com/stream/130242