新睿云

> 知识库 > 减少数据冗余 提高存储利用率

减少数据冗余 提高存储利用率

作者/来源:小睿 发布时间:2019-12-05

冗余指多余的不需要的部分或者是增加的重复的部分,即是通过备份同一数据来增强数据安全性。所谓数据冗余是指同一数据存储在不同文件中造成数据重复。

对于企业来说,信息资源管理和大规模信息系统获得成功的前提条件是增加数据的独立性和减少数据冗余。数据冗余会增加传输开销,浪费存储空间,导致数据不一致,降低可靠性。

数据冗余

如何减少数据冗余,增加数据的独立性?

1)冗余检测和数据压缩

数据压缩技术通过对数据重新编码来降低冗余度。该方法可以用于不同的数据集和应用环境,提升性能。

由广泛部署的摄像头收集的图像和视频数据存在大量的数据冗余。在视频监控数据中,大量的图像和视频数据存在着时间、空间和统计上的冗余。视频压缩技术被用于减少视频数据的冗余,许多重要的标准已被应用以减少存储和传输的负担。

2)数据去重技术

数据去重技术是重复数据删除,保存唯一数据单元。

应用数据去重技术,有效节省存储空间,提升写入性能,节省网络带宽,对大数据存储系统具有非常重要的作用。

数据冗余

3)对特定数据对象进行预处理的技术

特征提取技术在多媒体搜索和DNS分析中起着重要的作用。这些数据对象通常具有高维特征矢量。

数据变形技术则通常用于处理分布式数据源产生的异构数据,对处理商业数据非常有用。

热门标签
new year
在线咨询
咨询热线 400-1515-720
投诉与建议
{{item.description}}

—您的烦恼我们已经收到—

我们会将处理结果发送至您的手机

请耐心等待