现代数据存储降低数据管理的高成本
来源:CPDA数据分析师网 / 作者:数据君 / 时间:2020-07-16
随着数据创建的指数增长,这些数字资产的有效存储和管理对于组织至关重要
但是挑战在于如何在不增加数据存储预算负担的情况下支持这种数据增长,因为有人说80%以上的数据存储在错误的存储层上,每年使组织损失数百万元,传统上数据存储是通过利用分层金字塔结构来保护数据的技术定义的,金字塔的顶部指定为用于存储“热”数据的固态磁盘,用于存储“热”数据用于金字塔的基础以存档“冷”数据,但是随着数据使用变得越来越复杂,规模越来越大,协作水平越来越高以及工作流变得越来越多样化,用户正被推向一种新的数据存储模型。
新的存储模式
两层存储模型正迅速被接受为降低数据存储成本和提高存储效率的主要方法,其目标是通过根据业务价值(或需求)优化数据管理和存储来程度地降低存储成本,同时实现性能,功能和容量的平衡,新的范例将基于文件的主层和基于对象的层组合在一起,主层(或项目层)保存所有正在进行的数据和活动项目,它由闪存DRAM和高性能磁盘驱动器组成,可以根据响应时间来满足关键数据工作流程的要求,层可以容纳多种存储介质类型,包括云存储,对象存储,网络附加存储(NAS)和磁带的任意组合,以解决数据保护,多站点复制(共享),云和数据管理工作流程的问题,在对数据进行操纵,分析,共享和保护时,它们可以在层之间无缝移动。
在两层范式中实施适当的存储管理策略可以使组织解决当今相关的数据存储问题
同时创建一个对未来的增长,发展和变化开放的环境。现代存储管理软件(SMS)通过“智能”迁移数据到适当的存储级别来程度地提高效率,为此SMS会自动扫描主层中的闲置资产,然后识别并转移到层,此过程释放了昂贵的主存储层,从而减少了备份,提高了性能并节省了成本,这样还可以更准确地预测和管理存储预算,并且可以轻松部署新的存储介质,而无需对现有的存储基础架构进行全面检查。
基于项目的存档:灵活性,快速访问和增强的保护
层充当大型数据集和项目的存档层,可以在收集数据后立即将其移动,以一家研究机构为例,该机构从传感器中收集大量机器生成的数据,以检测物理现象以进行太空探索,可能不会立即分析输出,但是需要保留数据以备将来参考,借助存储管理软件,单个研究人员可以将数据移动到成本较低的存储中,并根据需要将其放回原处,从而为数据指定存储层,可以将需要保护的数据移至无法从外部访问的磁带存储层,也可以将其定向到云进行分发或共享,这种类型的项目标识可以从多种类型的数据生成器中收集多种形式的数据,不同的部门和小组根据性能基于标准化的服务水平协议(SLA)使用相同的数据存储基础结构,存储管理软件可以通过将不活动的数据和整个数据集移出高速存储来加速研究,存储管理软件提供对人员,应用程序或机器所生成的所有数据的访问权限,从而使管理员和研究人员可以识别出正在使用的数据和需要归档的数据。
使用现代的存储管理软件
研究人员可以扫描和识别要归档的非活动数据集,或者在大型项目完成后将与项目关联的文件或目录移动到层,可以使用附加的元数据对已归档的数据集进行标记,以实现轻松的搜索和访问。
数据使用量,而非技术
新的两层范例专注于数据的实际使用,而不是其驻留的技术,为了有效地采用两层数据存储策略,必须确定哪个存储层适合给定的数据类别,不仅如此而且随着数据的老化,随着数据存储需求的不断发展,必须定期对其进行重新分类,可以利用基于对象的存储将从主层移动到层的非结构化数据存储在磁盘,磁带或云上,该存储将文件存储为“对象”,并使用描述其内容的元数据标记文件,这消除了复杂性,并允许更大的可伸缩性。
数据管理就是要确保数据在正确的时间驻留在正确的存储层上
由于手动进行数据管理的方法几乎是不可持续的,因此许多企业使用软件来优化其基础架构以使该过程自动化,除了在整个生命周期中监视数据并将其根据年龄或其他条件转移到成本更低的层之外,现代数据管理软件还为IT提供了策略引擎,可为IT创建适合其许多工作流程和各种运营需求的正确数据移动过程,通过部署存储管理软件以从主层中删除“低交易量”数据,组织可以释放此较昂贵层上的容量,同时确保可以使用并安全地保留访问频率较低的数据的扩展容量长期使用。
借助两层存储模型,组织可以使用智能,经济高效的存储管理软件来安全地支持其随着业务扩展的未来数据增长,该软件可以使IT基础架构与公司的目标相匹配,从而满足客户并保持盈利能力。