从内容库到8K:M&E不断增长的数据问题
来自tvtechnology存储专家分享,如今,越来越多的媒体公司承受着更高性能要求的压力,特别是4K,8K甚至更高分辨率的视频格式的要求,以及容纳不断增长的内容档案的成本。更加沉重的压力是,媒体公司必须比以往更快地管理和利用不断增长的数据集,既要迅速满足新的业务需求,又要适应整体竞争日益激烈的行业。
为了管理生产应用程序不断增长的性能要求(从渲染和编辑到转码)以及存储不断增长的数据量的要求,传统的应对方法是工作室建立多层数据存储。通过这种方法,每个层都旨在满足管道中某些应用程序的性能和成本要求。实际上,作为一个行业,我们一直在建立这些存储金字塔,以至于存储层次结构已根深蒂固,成为管理媒体数据的原则。
但是,这种方法也为媒体公司增加了不必要的复杂性和成本。由于这些性能要求仅对媒体公司增长,因此阻碍进一步数字化转型的这些复杂性,成本和总体障碍也在增加。
那么媒体公司可以采取哪些步骤呢?首先要真正了解坚持数据管理现状的弊端,找出可以为不同思维方式打开大门的新技术和方法,并将这些投资重新映射到不断变化的媒体和广播未来的道路上。 。
金字塔存储提高了复杂性
具有多层存储本质上以多种方式增加了复杂性。最明显的是,某人,或者更可能是某些脚本,MAM或数据管理器,必须在资产从创建,生产到组织存档的过程中将资产从一层迁移到另一层。尽管全局名称空间覆盖,自动安装程序脚本和存储管理软件使这些移动或多或少对用户透明,但最终的基础结构相对脆弱。更糟糕的是,这种脆弱性使工作室过度依赖一两个系统管理员,他们真正了解它们的工作原理,并在出现问题时可以再打补丁。这种依赖性只会导致整个媒体工作流程效率低下和出现瓶颈。
在许多媒体组织中,通过在管道的某些阶段使用专门的存储解决方案,复杂性得到了提高。尽管特定于媒体的存储解决方案(如SAN文件系统)历来提供更好的性能,但它们增加了客户端代理的复杂性。同样,特定于应用程序的存储可能支持专有的API,这些API可以改善协作,但是为特定应用程序使用专用存储只会增加存储系统,数据移动脚本和独立的可用空间池的数量。
仅当层之间的成本差异足以抵消它们之间迁移数据的成本和复杂性,而较慢的层仍然足够快以支持那些访问那里的数据的应用程序时,金字塔式存储层次结构才真正有意义。但是,随着用户对存储性能的要求和对在线内容的需求上升,而传统磁盘存储的性能实际上却下降了,旧的可靠存储金字塔对媒体组织来说已经开始崩溃。
挑战金字塔存储
我们已经看到有人倡导采用活动层和永久层的“两层”数据存储方法。虽然两层肯定比四层或五层简单,但仍必须根据需要将数据从活动层移到永久层,然后再移回永久层。尽管媒体资产和存储管理系统声称在放置数据时会做出“智能”决策,但某些数据不可避免地会被错误分类为永久层,并且需要根据用户需求进行检索,从而降低了他们的工作速度。
媒体工作流和存储技术的最新变化首先挑战了分层的基本前提,即多层的总成本将更低。新一代全闪存存储系统使存储媒体组织的所有在线资产的总成本(从最活跃到归档到单个易于管理的名称空间)的总成本低于分层存储的成本,从而彻底改变了闪存的经济性。 。
通过将组织的I / O密集型应用程序的性能要求与其归档的容量要求结合起来,这些系统可以管理成本较低的闪存,以满足最苛刻的媒体组织的成本,性能,弹性和耐用性要求。
将活动数据和档案数据存储在快速的全闪存存储中,不仅消除了在层之间移动数据的所有复杂性,而且使所有档案数据可用于进一步重用。例如,组织可以不依赖几十年的元数据,而释放“ GPU场”来使用人工智能,并识别其库中的艺术家,徽标或其他图像以提高效率。
通过切换到全闪存存储基础架构,媒体组织可以在一个提供无与伦比的优势的平台上针对从特效渲染到提供流媒体服务以及归档其最有价值的媒体资产等所有内容部署单个系统。
颠覆媒体的未来
随着主要广播公司将其产品扩展到流媒体世界的竞争日益激烈,对各种内容的需求不断增加(尤其是在COVID-19大流行期间消费者将更多时间花在家里),而媒体组织则希望以此为底线并制作广告。在满足这些需求的所有这些增加的投资中,ROI很高,因此对高效和有效基础架构的需求空前高涨。
尽管最近几个月可能促进了对高质量,数据密集型应用程序和内容的需求,但这种需求只会随着空间竞争的发展而增长。这意味着媒体公司在评估和重新构想现代媒体和娱乐行业的工作流程时,一定不能动摇。
因此,媒体组织应探索下一类存储系统。如果全闪存存储模型的成本不止于多层金字塔,而且仍可为您提供更高的性能,那么为什么还要继续投资于多层方法呢?
霍华德·马克(Howard Marks)是VAST Data的全职技术专家。