宏杉科技监控存储技术汇报

《宏杉科技监控存储技术汇报》由会员分享,可在线阅读,更多相关《宏杉科技监控存储技术汇报(67页珍藏版)》请在文档大全上搜索。
1、 宏杉科技监控存储技术汇报监控的挑战与宏杉存储革新监控的挑战与宏杉存储革新2宏杉数据存储概要宏杉数据存储概要3宏杉公司介绍宏杉公司介绍1关于宏杉科技p 杭州宏杉科技有限公司(MacroSAN Technologies Co., Ltd专注于完全“自主可控”的企业级存储系统及解决方案的研发生产,掌握存储数据管理平台全部软硬件核心技术,是国内唯一从软件到硬件具备完全自主知识产权,并且可以推出从低端到高端全系列产品的存储厂商。p 公司核心团队由在中国存储行业具有丰富的技术积累、开发和管理经验的人员组成。该团队开创了IP SAN存储市场,连续四年在中国IPSAN 市场排名第一。团队开发的存储产品在网超
2、过10000台,存储总装机容量超过120,000TB。发展目标:五年,成为国内领先的存储系统和解决方案供应商十年,成为市场份额进入全球前列的世界级供应商3长期经验积累的团队宏杉科技的研发、市场、生产、服务团队,在中国企业级存储产品开发、生产和宏杉科技的研发、市场、生产、服务团队,在中国企业级存储产品开发、生产和应用上具备长期的成功经验,曾经获得卓越的市场成就。应用上具备长期的成功经验,曾经获得卓越的市场成就。 以宏杉团队为主体,从2005年开始在H3C公司存储产品线进行存储系统研发销售,2009年以超过5亿的销售额排名国内市场份额第5名,后因母公司被外资收购而独立为宏杉科技。宏杉团队开发的产品
3、,目前在线运行的存储系统总和超过10000台,存储总装机容量超过120,000 TB,积累了丰富的技术和应用经验。公司主要成果及荣誉lIntel全球两家存储顶级合作伙伴之一;l全球网络存储工业协会SNIA成员;l中央政府采购和中央直属机关采购入围品牌;l国产化电子政务自主创新联盟理事单位;l美国电气和电子工程师协会 IEEE成员,拥有以 00B342开头的地址段(SAS/FC/以太网地址)lODSP开放数据存储平台软件专利证书;lISO9000/ISO14000环境管理体系认证。5MacroSANMacroSAN存储产品存储产品家族家族6高端高端存储存储中端存储中端存储低端存储低端存储u单控制
4、器u最大16GB缓存u最大266块硬盘uCRAID 0/1/10/5/6u支持4个GEu低功耗u双控制器u8GB缓存u最大266块硬盘uCRAID 0/1/10/5/6u固化GE/FC接口u双控制器u最大32GB缓存u最大516块硬盘uCRAID 0/1/10/5/6u4个主机接口插槽uIntel Jasper处理器u双控制器u最大144GB缓存u最大1016块硬盘uCRAID 0/1/10/5/6u4个主机接口插槽uIntel Jasper处理器u双控制器u最大288GB缓存u最大1016块硬盘uCRAID 0/1/10/5/6u4个主机接口插槽MS1000MS2500MS3000MS502
5、0/5040MS5080软件、硬件全部软件、硬件全部自主研发!自主研发!全系列产品基于全系列产品基于ODSPODSP软件架构!软件架构!拥有国内存储企业中最完整的拥有国内存储企业中最完整的企业级存储产品线企业级存储产品线;单台设备覆盖单台设备覆盖1010万万数数百万的产品区间;百万的产品区间;主要研发方向7MS5000MS3000MS1000 ICMTCRAIDIDDC全系列硬件产品全系列硬件产品ODSPODSP软件平台软件平台快照复制镜像IDSMIDSM存储中间件存储中间件面向云计算面向物联网流媒体应用(广域监控)面向共享灾备IDSM:IDSM:Intelligent Data Servic
6、e Management,智能数据服务管理 ODSP:ODSP:Open Data Storage Platform,开放式数据存储平台高性能硬件架构,高/中/低端三大系列监控的挑战与宏杉存储革新监控的挑战与宏杉存储革新2宏杉数据存储概要宏杉数据存储概要3宏杉公司介绍宏杉公司介绍1视频监控发展趋势视频监控发展趋势高清前端采集设备:模拟摄像机-高清IPC分辨率:D1-720P-1080P存储码流:1.5Mbps-4Mbps-8Mbps.智能联网物联网应用人脸识别、图像分析、卡口/电子警察等应用快速普及监控平台越来越开放多厂商设备互通性政府:部委-省-地市-县多级联网(平安城市、警务督察、应急指挥
7、)大企业:大型央企全国联网(中石化、烟草总局)普教联网、电力/税务营业厅广域联网监控9监控存储的应用特征监控存储的应用特征 n传统存储:传统存储:无论是结构化数据(数据库),还是非结构化数据(文本、图像),其组织方式都是非结构化的,无明显的规则而言。n监控存储:监控存储:数据表现形式是非结构化的,但其组织方式却体现结构化特性,规则性很强。项目项目传统存储传统存储监控存储监控存储数据库表数据库表文本、图像文本、图像图像、音频图像、音频数据数据表现形式表现形式结构化结构化(有序,可用统一结构表示)非结构化非结构化(无序、无法用统一结构表示)非结构化非结构化(无序、无法用统一结构表示)数据数据组织方
8、式组织方式非结构化非结构化(无序,规则性不强)非结构化非结构化(无序,规则性不强)结构化结构化(有序、规则性很强)传统存储和监控存储的读写模式差异传统存储和监控存储的读写模式差异项目项目传统存储传统存储监控存储监控存储说明说明数据块大小数据块大小数据库是8-64KB,单应用的块大小不固定64KB-1MB,单数据流的块大小固定稳定的压力数据访问频度数据访问频度区分峰值、谷值7*24小时均衡访问持续的压力数据更新方式数据更新方式数据库是随机性更新数据循环写稳定的压力数据突发数据突发有数据突发稳定的流量稳定的压力读写比例读写比例读居多,数据库读比例70%,写比例30%写居多,写比例95%,读比例5%
9、基本是写操作读写热点读写热点2/8原则,20%的数据承载80%的访问均衡原则,硬盘访问的机会均等稳定的压力数据容错度数据容错度数据块不允许丢失少量数据块丢失,不会造成图像不可用允许硬盘坏块u监控应用对存储阵列是持续的、稳定的顺序写压力。监控应用对存储阵列是持续的、稳定的顺序写压力。监控应用中的硬盘故障问题监控应用中的硬盘故障问题n监控监控应用模式失效率明显高于普通存储应用,与监控应用对硬盘频繁写操作应用模式失效率明显高于普通存储应用,与监控应用对硬盘频繁写操作相关相关。n问题一:如何解决近问题一:如何解决近70%70%的假象磁盘报错问题?的假象磁盘报错问题?n监控应用模式监控应用模式加剧了硬盘
10、故障加剧了硬盘故障,需要优化存储处理机制。,需要优化存储处理机制。监控存储中的监控存储中的RAIDRAID应用应用nRAID的容量损耗:的容量损耗:RAID组内的硬盘越少,硬盘损耗百分比越大。8块磁盘的RAID5组,6+1+1配置,损失容量2/8=1/416块磁盘的RAID5组,14+1+1配置,损失容量2/16=1/8nRAID的性能影响:的性能影响:DVR/DVS等启动RAID,性能减半,以ISC3000为例:码流码流(Kbps)(Kbps)JOBDJOBDRAID5RAID5256603251260321024402420482012n传统传统DVR/DVSDVR/DVS:配置较低,采用
11、RAID方式会大幅降低性能;硬盘数目不超过8块,可用容量损耗较大,一般不做一般不做RAIDRAID。n专业存储阵列:专业存储阵列:配置较高,专用的RAID处理模块,RAID后性能无明显下降;硬盘数目较多,可用容量损耗不大,一般推荐做一般推荐做RAIDRAID。监控存储中的监控存储中的RAIDRAID应用(续)应用(续)nRAIDRAID带来的硬盘管理问题带来的硬盘管理问题(1 1)RAIDRAID加大硬盘损坏的影响范围:加大硬盘损坏的影响范围:在1个RAID5组中,如果连续坏2块硬盘,将会导致这个RAID组上的所有数据丢失。(2 2)RAIDRAID重建对性能影响较大:重建对性能影响较大:RA