成都监控安装网欢迎你:监控安装、监控摄像头安装、监控器安装、网络监控安装、监控工程;专业承接各种监控安装等弱电工程

诚信 · 专业 · 高效

当前位置:

安防数据存储新需求催生新一代RAID技能

更新时间:2018-10-10  阅览次数: 893 次

近年来,随着智慧城市和的快速发展,金融、交通、政府等传统领域的安防运用更加深入,以及移动互联设备的快速激增,产生了海量的非结构化音视频数据,随之而带来的大数据下的存储问题及数据安全问题,逐渐成为安防监控领域里新的课题。

安防数据的存储伴随着安防技能和存储技能共同发展。先后经历里模拟前端+DVR存储、模拟前端+DVS/DVR+互联网存储、互联网前端+NVR、互联网前端+互联网存储等阶段。现在随着互联网带宽的提高,使得高清运用越来越多数,进而对安防存储系统提出了更高的条件。

一、安防数据存储新需求

当今安防发展特点允许概括为以下三点:

1)高清化

●高线模拟:600/650/700线模拟+高分辨率DVR

●数字高清:SDI/HDSDI,HDCCTV

●高清互联网:130万/200万/500万IPC+HDVR+NVR,4K运用

2)智能化

●从事后追责,被动运用过渡到事先防控、主动防御,进一步解放人力、提高效率

●从技能层面的智能分析进入实战运用用阶段,如周界防范、人员追踪等,已经在公安、交通、金融、司法等行业初步使用

3)融合运用

从单系统独立使用进入多系统平台融合使用阶段,主要表现为

●大容量视频信息汇集、共享

●安防系统内部整合,对接上层业务管理系统

●多系统融合,比如应急联动、紧急布控、公安消防等

●安防与IT技能高度融合

二、安防存储新技能:从底层保护数据安全

从以上分析可知,安防系统已经步入实战阶段,而智能分析、主动防御、融合运用的实战操作必须建立在可靠的监控数据存储系统上。这里解释两种新的RAID技能,该技能允许从底层保证数据的安全存储。

1、VRAID(VedioRAID)技能

RAID技能已经很熟悉,属于磁盘阵列的基础技能,经过不断发展,现在已经有了从RAID0到RAID7八种基本的RAID级别和类似RAID10、RAID50的二维RAID不同的RAID级别允许为用户提供相应的RAID性能和数据安全性。但任何一种RAID技能都有故障盘容忍限度,即坏盘数量达到一定数量后整个RAID组失效,其中的数据全部丢失。例如,传统RAID5中,一块硬盘损坏时,RAID通过冗余机制允许保证数据不丢失,但当硬盘损坏2块以上,很不幸RAID5已经不能帮您恢复硬盘数据,一般来说只好和您的所有数据说byebye了!

这里解释的VRAID技能是一种面向安防运用的新RAID技能(针对视频运用推出的全新技能)。VRAID技能允许有效的解决传统RAID中多(2或以上)块硬盘损坏后,整个RAID组中数据完全丢失的问题。即VRAID中坏2块盘以上(理想情况下只要有1块可用盘即可),剩余好盘中的数据仍然可读,同时新数据可持续写入。

技能道理:VRAID的实现是立足于存储设备底层不同于传统文件系统的流媒体数据管理结构和RAID优化技能来。当VRAID中多块盘损坏时,在流媒体数据管理结构下,好盘上各个条带中的视频数据仍可独立播放;播放到坏盘条带时,直接自动跳过并且自然播放下一个可用条带上的数据,保证录像画面播放流畅。同时新数据传输过来时,仍然可写。

2、互联网RAID技能

传统RAID受限于硬盘数量,在数据容量剧增的年代无法满足企业对资源统一灵活调配的需求。存储智能高效的发展趋势条件底层的数据分布架构必须具有高度灵活性和扩展性,随着硬盘容量的增大,以硬盘为单位对数据进行管理也显得越来越力不从心。一般的磁盘阵列只能在同一个物理节点内部做RAID,且一个硬盘只能位于一个RAID组内,当发生控制器宕机或者磁盘损坏,这时所有数据就都都丢失了,这是传统的磁盘阵列RAID可用性方面比较大的劣势。

互联网RAID是一种Scaleout技能,通过互联网通讯允许在不同的物理节点之间建立RAID.并且组成RAID的基本单元不再是整个硬盘,而是每个硬盘Chunk块,一个硬盘允许处于多个RAID组中。当某个物理节点宕机后,整个系统的数据允许通过其他物理节点恢复出来;单个硬盘故障时,允许由多个磁盘共同参与重构,重构过程可在分钟级内完成。

技能道理:

1)把各个物理节点的所有硬盘划分为Chunk块

2)基于不同物理节点的硬盘Chunk块创建RAID

整个RAID是基于Chunk来建立,Chunk来自不同的物理节点的磁盘。整个RAID组允许由所有物理节点(一块或多块硬盘)共同构建。

第一组RAID:3+1——3个有效数据,1个校验数据

第二组RAID:3+2——3个有效数据,2个校验数据

3)单块硬盘故障及处理

一块硬盘允许位于多组RAID中,因此当单块硬盘损坏时,会有多组RAID共同进行重构计算,极限情况下所有硬盘同时参与重构计算,速率比普通RAID时大幅提高,可达分钟甚至秒级。

4)整个物理节点故障及处理

假设第三台设备故障。普通RAID时,整台设备的数据丢失。

在互联网RAID中,对各RAID的影响。每组RAID中只有部分Chunk数据丢失,通过该RAID中的剩余数据块,是允许完全恢复的。

3+1RAID3+2RAID

互联网RAID虽然称为RAID,实际是分布式存储技能。允许解决普通RAID下重构时间长,多个存储节点堆砌运用时的管理负担大,无法满足热点需求,节点故障时数据丢失等问题,消除更大的系统可用性风险。

在互联网RAID中,不再以整盘作为管理单位和校验单位,磁盘分段(Chunk)管理,化整为零,提供精细化管理、高级别容错和高性能数据恢复,为数据存储提供高可靠性。

在互联网RAID中,一般磁盘错误,允许在秒级重构完成;磁盘失效时,大量磁盘参与重构,加速重构过程数十倍;存储资源跨节点分配,管理更简单,更重要的是整个节点故障时,可保证数据不丢失。高度容错设计,无论是坏盘依旧节点更换和扩容,均能简单应对和实施,从而提升整体存储计划的持续可用性。