海量数据时代,磁带存储的“涅槃重生”

   磁带作为大规模非结构化数据的战略性/低成本存储手段,已然经历了一次复兴。由于磁带在快速恢复网站和反勒索软件方面具有较高的价值,所以备份仍然是它的一个主要用例。不过,磁带的未来增长机会更在于一些新兴的领域。

  随着相关技术的不断发展,磁带也跟上了存储行业发展的步伐。新的创新性磁带技术,使磁带成为新数据密集型环境和先进用例中的关键技术。先进的人工智能(AI)、利用视频和其他流媒体数据的应用程序,以及物联网(IoT),使大规模数据的长期存储成为磁带市场提升的重要驱动力。

  新的进展包括更强大的智能,如擦除编码、搜索、自数据完整性检查;更好的数据管理工具,如基于web的远程控制,以及更高的自动化能力。由于诸如带有缝隙离散的多路磁头和让记录面更加密集的新基片等相关创新,磁带的密度也在提高。这些改进使磁带成为大规模数据环境中的关键技术。

  LTO联盟还为磁带开发人员提供了丰富的资源池,在推动重大进展方面发挥了重要作用。这种合作推动着技术创新、行业发展和更快地进入市场。

   Photo by  Pietro Jeng  from  Pexels

   先进用例

   人工智能

  一些行业已经广泛采用人工智能技术(AI),因为它们拥有庞大的数据集。AI三大主要应用领域包括自动驾驶汽车、媒体娱乐以及视频监控和安全。这三个行业都会产生大量的数据,这些数据将被保留下来用于研究、重用和调查,磁带可以让用户在长时间内有效地存储大量的活跃数据。

   ·自动驾驶 运行在数据之上,高端自驾车每天的数据接近100 TB。这些数据主要是传感器信息,使自驾车对驾驶条件作出反应,并统计车辆安全信息。例如,要证明一个自动驾驶模型和一位称职的人类驾驶员同样可靠,每个模型需要2.75亿英里的驾驶和测试。

   ·媒体娱乐 通过AI技术使用、重用数字内容以吸引更多的客户,增加利润。流媒体服务需要存储的压缩数据可以轻松地达到数千PB,而将这些数据存储在昂贵的硬盘上是不明智的。

   ·视频监控 正在快速发展,随着AI人脸识别和其他数据密集型视频技术的进步,摄像机会产生更多的视频。如果保存期不超过30天,则不需要磁带。然而,有些视频保留期限都超过了30天,甚至之后还在增加,特别是在情报和执法部门。只有磁带的成本能够有效地满足存储大量视频数据的需要。

   反勒索软件(Anti-Ransomware)

  有调查报告,2017年勒索软件造成的损失达到50亿美元,甚至到2018年也没有放缓的迹象,尤其是随着攻击循环技术的引入。

  磁带在数据安全方面是独一无二的,这是因为它具有所谓的空气间隙(Air Gap),简单地说,这表示磁带盒95%的时间是离线的。之前,企业可以通过恢复已加密生产数据的备份来抵御勒索软件。然而,现在攻击循环也会感染网络备份存储库,无论是在网络上还是在云中。如果您的备份数据在磁带上,那么很有可能获得比较好的数据恢复效果。

   基础设施/物联网

  具备超大规模/云环境的大型公有云提供商需要成本更低的基础设施,云提供商可能不会告诉你这一事实,但即使是最大的云提供商也经常使用磁带进行低成本的冷数据存储。另一个增长领域是公路上的基础设施投资,包括街道上的传感器/摄像头每天都生成TB级的信息用于交通分析。

  磁带在大规模的研究环境中也很受欢迎,如基因组学、生命科学和气候变化。在一个场景中,一个大型基因组测序实验室用磁带替换了硬盘驱动器,存储成本从80万美元暴跌至7000美元。在物联网领域,一个物理区域如家里、办公室、工厂、甚至智能城市,其区域边缘拥有多个数据输入源,可以使用磁带存储来存储海量边缘传感器数据,将其用来分析、报告和管理,增加信息效率。

   媒体娱乐

  媒体娱乐行业对磁带的需求相对较大,因为磁带容量大,成本低,可以播放大量的广播文件。磁带技术在该行业的第二个有价值的驱动力是数据挖掘。例如,体育产业经常需要定位特定运动员击出本垒打、射门得分或体操金牌的视频。或者,他们想要找到出现在看台上的名人的视频,或者监控赞助承诺,以确保他们的标识根据合同规定的数量出现在节目中。

   结论

  磁带在数据需要长期保存的领域一直保持着竞争力。在数据持续爆发增长的今天,它变得更加重要,因为它结合了持久性、性能、高效管理和低成本——这对需要处理大量数据的公司产生了巨大的影响。

  分析机构ESG对企业存储基础设施5年来的TCO进行了调查分析,包括本地硬盘阵列、混合云和LTO磁带库。ESG报告说,磁带的TCO比基于阵列的解决方案低近7倍,比混合云低5倍以上。

  在这样一个瞬息万变的世界里,能够适应环境的技术才能生存下来。磁带将会继续发展,为现有的、正在出现的用例提供独特的价值。

  原文作者:Mark Pastor 来源:Enterprise Storage

  原文链接:https://www.enterprisestorageforum.com/storage-hardware/new-trends-in-tape-storage.html

Image placeholder
空格君
未设置
  51人点赞

没有讨论,发表一下自己的看法吧

推荐文章
海量数据时代,金融行业数据库实践难题如何解决?

随着数字经济时代的到来,大数据、人工智能技术得到了快速发展与应用,可以说,各行各业都已全情投入到这一波数字化转型浪潮中,把握新的发展机遇,获取数字红利。其中,金融行业可以说是走在转型之路最前沿的行业之

大数据时代,数据湖并不能完全取代数据仓库

数据仓库为组织了解其历史业务表现和推动持续运营提供了一个接入窗口,为数据分析师和业务用户提供了诸如客户行为、业务趋势、运营效率和销售等方面的信息。尽管出现了基于Hadoop和其他一些大数据技术的数据湖

海量数据AtlasDB:把“数据库好用”这件事做到极致

导语:坚守初心、不辱使命,近期海量数据研发的企业级数据库AtlasDB获得了市场的普遍关注。这款以“好用”著称的国产数据库产品,不仅承载着海量数据公司对技术创新的坚持和投入,更凝结着一群拥有“工匠之心

南大通用的“凤凰涅槃”

凤凰涅槃,浴火重生。以这样的主题开会,是一家企业经历过风雨后拥抱未来的自信与决心。6月26日,南大通用GBase召开了合作伙伴大会,这家沉寂了一段时间的老牌国产数据库厂商,经历了去年的动荡,如今在以丁

亿级海量数据的实时读写和复杂查询实践

摘要:本文分享了每日亿级增量数据的实时读写、复杂查询场景实践介绍,涉及MySQL分表分库策略、数据异构、TiDB使用和优化、微服务架构等内容。  作者:黄哲铿  黄哲铿,中通商业CTO,前1号店技术总

核心业务“瘦身”进行时!手把手带你搭建海量数据实时处理架构

01背景 在线交易服务平台目的是减轻核心系统计算压力和核心性能负荷压力,通过该平台可以将核心系统的交易数据实时捕获、实时计算加工、计算结果保存于SequoiaDB中。并能实时的为用户提供在线交易查询服

面试高频:如何访问 Redis 中的海量数据?

目录前言事故产生分析原因解决方案总结前言有时候我们需要知道线上的redis的使用情况,尤其需要知道一些前缀的key值,那我们怎么去查看呢事故产生因为我们的用户token缓存是采用了【user_toke

分布式存储时代,横空出世的OceanBase

数据,被誉为新时代的石油。几乎任何一个企业的IT管理者,都会在演讲、采访或其他形式的交流分享中强调数据的重要性。获取洞察、行为预测、市场分析、业务转型升级……数据能够为企业带来巨大的商业价值。但与此同

NAS与对象存储:谁是非结构化数据存储的最佳选择?

非结构化数据是增长最快的数据类型之一。随着企业日积月累地生成、收集和存储越来越多的数据,必然会带来一个问题:什么是存储非结构化数据的最佳方式?直白来说,非结构化数据就是不遵循传统数据库格式的数据,其结

新数据时代下,变革中的浪潮存储

在物理世界与数字世界之间的连通不断扩大、商业形态不断变化的今天,云、大数据、AI、物联网等技术的广泛应用,加速了整个产业向数字化、智能化的转型升级。在这样的时代背景下,合理地存储、使用与管理数据,释放

分层存储超详细解读,为什么大数据时代它已不可或缺

如今,分层存储已成为了一种常见的存储方法,它将数据存储在具有不同特性(如性能、成本和容量)的不同存储介质上。不同的存储媒介被分配到不同的层次结构中,其中最高性能的存储媒介被认为是第0层或第1层,然后是

开源社区的技术债:写代码的“码农”VS 删代码的“清道夫”,谁更该被嘉奖?

大数据文摘出品编译:楚阳、橡树、钱天培对于开源项目来讲,写新代码的贡献者不一定是好程序员,但不会删代码的程序员一定不是合格的程序员——因为“删代码”才是使开源软件项目的代码简洁高效的关键所在。Mong

看得见的“岛”与看不见的“智慧”

俗话说:“耳听为虚,眼见为实”。都说华为把福州海峡国际会展中心所在的小岛,打造成了“智慧岛”。您亲眼所见了吗?  我亲眼所见了!并且有图有真相!我来带您全方位的去逛一逛!  您看得见场馆大门的闸机,但

万兆的“强项”和千兆的“软肋”

“5G+Wi-Fi6”珠联璧合,重新定义了无线网络;“VR/AR+4K”持续发展,催生了更多的高带宽应用。技术革命的浪潮已经开启,翻倍的传输速率、海量的数据接入和复杂的网络管理,给园区网络带来了前所未

做银行家里的数据专家:ING探索大数据时代下的金融最佳实践

大数据文摘出品记者:高延6月18-21日,O’ReillyAIConference在北京召开。大会上,来自荷兰的金融公司ING的IT主管BasGeerdink带来了《关于数字驱动企业》的主题分享。进入

在云、AI时代,传统应用性能监控方案过时了吗?

近年来,企业云对IT复杂性产生巨大影响,越来越多的企业需要能够解决云复杂性上升或加速数字化转型的有效方案,而人工智能正在成为解决这些问题的不二之选。在全球智能运维浪潮下,不少公司都选择重写代码,颠覆自

腾讯汤道生:产业互联网时代,安全成为CEO的一把手工程

产业互联网日益成为众多行业实现转型,获得发展新动能的趋势性选择,政务、金融、医疗、出行、教育、零售、工业等垂直领域,正在全面拥抱产业互联网。网络安全作为互联网的基础保障,在产业互联网发展和企业数字化升

云原生时代,分布式系统设计必备知识图谱(内含22个知识点)

作者|杨泽强(竹涧)阿里云技术专家我们身处于一个充斥着分布式系统解决方案的计算机时代,无论是支付宝、微信这样顶级流量产品、还是区块链、IOT等热门概念、抑或如火如荼的容器生态技术如Kubernetes

YC中国创始人陆奇:人工智能时代,芯片和底层软件基本都要重做

大数据文摘出品作者:陆奇编辑:周素云2019年5月18日,在YC中国举办的YC中国创业者见面会上,YC中国创始人及首席执行官,YC全球研究院院长陆奇进行了以“技术驱动创新带来的创业机遇”为主题的精彩分

5G芯片进入三国杀时代,未来谁主沉浮?

手机芯片的江湖从来都是腥风血雨。进入5G时代,江湖再掀波澜,一场5G芯片之争风云再起。这次谁胜谁负?谁将问鼎?从五强争霸到三足鼎立,江湖格局渐明手机芯片一般指SoC芯片,它将基带芯片和CPU、GPU等

百度时序数据库——存储的省钱之道

作者简介:任杰  百度高级研发工程师负责百度智能运维产品(Noah)的分布式时序数据存储设计研发工作,在大规模分布式存储、NoSQL数据库方面有大量实践经验。干货概览百度Noah平台的TSDB,是百度

如何解决云中容器数据存储的移动性挑战?

如今,在云计算领域,越来越多的IT组织正在构建混合云和多云环境以支撑其业务运行。从容器的角度来看,我们知道,容器应用程序从一开始就内置了非常可观的可移动性、灵活性和效率。但是对于容器数据来说,它的移动

引领存储新时代——新华三Primera关键业务智能存储

技术的变革,让我们步入数字智能时代。由数据、AI驱动的智能化产业转型正在如火如荼地进行中,金融、工业、医疗、娱乐……智能改变着一切。在IT对于企业已经如此重要的今天,智能也正改变着支撑企业业务运行的底

HPE收购MapR,以Hadoop供应商为首的大数据时代落幕

Hadoop三驾马车之一的MapR陷入困境后终于有了着落,今年5月底MapR宣布由于“业绩极差”将被迫关闭公司,MapR给自己设定寻找资金的最后期限是7月3日,一个月后MapR被HPE收购。8月5日,