上海景帝智能科技有限公司
扫一扫,手机逛起来
个人商铺
主营:物联网智慧平台解决方案包括智慧校园监控系统、企业智能制造与运营管理系统、政务系统政务公开平台系统、司法与监狱**监控系统、虚拟演播室、直播会务及赛事策划与直播、流媒体直播、及物联网IoT及虚拟现实AR硬件等解决方案产品与服务
02151857769
您现在的位置:
首页 > 技术文章
店铺信息
11
  • 入驻时间:2012-04-11
  • 联系人: 王雅淇
  • 电话:02151857769
  • 联系时,请说明仪表网看到的
  • Email:saturnbest@163.com
在线询价
技术文章

媒体资产系统中的数据管理(二)

发布时间:2012-06-11

  小型媒资系统可选用独立磁带机,也可选用含一个磁带驱动器的小型磁带库;对于一般中型的系统,实际上在平均流量上,1台磁带机已经足够保证数据归档和回迁的需要,但可能某个时段使用特别集中,系统响应的时间就会变慢,某个任务在排队后可能在十几分钟或更长的时间才会完成。另外,由于磁带机的平均无故障工作时间也不是特别的长,所以中型媒资系统通常配置2台磁带机。大型系统的磁带机通常在3台到5台,甚至会达到10台以上。这种大型系统的磁带机数量一般需要经过业务需求的仔细分析计算得到。大致需要考虑的因素包括:每天归档数据量、带库分区的情况(有几类节目在带库里面,被划分为几个不同的独立区域)、查询回迁的数据流量、磁带机的使用分配模式、使用的磁带类型等。需要说明的是,现在多数媒资系统都可以对不同厂家不同型号的数据流磁带库统一管理。

  ·数据库元数据管理方面,需要指定专门的存储空间来存放管理数据库。数据库数据的存储固然重要,硬件上为避免单个硬盘在系统运行期间出现故障,管理服务器的数据硬盘采用RAID卡实现硬件方面的冗余保护,这样既提高了服务器关键数据访问效率,又可同时保证单硬盘故障情况下不会造成任何数据丢失。此外还可以通过集群技术实现数据库管理的热备。另外针对媒资业务本身产生的元数据,需要根据不同的流程节点来选择不同的存储管理设备。

  我频道媒资系统在前期设计阶段,结合频道节目磁带库存量,制订了媒资收录的计划——日常播出节目播出后经上载进入媒资,此外每天定量上载以前的节目入媒资。根据现存的两套非编网络(喜马拉雅专题制作网和大洋新闻网)的通用视音频采集设置(视频采集格式DV/DVCPRO,码率25Mb/s;音频采集格式WAV,48Hz,16Bit),初步按照每天上载DV(25Mb/s)素材节目12小时(部署2个媒资上载站点同时工作),则可以计算出媒资上载的存储量:

  **存储容量=25×12×3600/8×1000×2=270GB
  一年存储容量=270G×365=100T

  对于媒资系统的在线存储,我们将高低码率的媒体文件在物理上单独规划:高码流视音频方面,我们配置了新奥特AS5000F-1磁盘阵列作为光纤末端的在线存储盘阵,其内置16块500GB的SATA-Ⅱ磁盘。它支持多种RAID模式:RAID0,1(0+1),3,5,6,10,30,50,60,NRAID和JBOD,特别是RAID6的支持,使其容错能力更强;RAID的条带化尺寸和缓存策略都可以根据需要进行调整,而且支持多种智能化处理。由于在搭建系统时已经做了RAID5(第1到第15块硬盘进行RAID5配置,第16块盘作为热备冗余)配置,所以有效存储空间约为6T左右。我们还部署了两台MDS存储管理服务器和一台NAS服务器来对在线存储进行管理、定义相关设备间的互联访问,使在线存储能够适应单网、双网等各种网络架构,针对不同的客户端布局提供相应的开放方式。前面已经计算出理论上每天媒资上载所需存储空间为270GB,所以这个空间完全可以支持一段较长时间内高码流视音频存储缓冲区的应用。

  另外,我们部署了一台流媒体服务器——RAIDSYS(建联)的AS3000N,对低码流素材和媒资流程中产生的元数据进行存储管理,该服务器盘阵也是配备了16块500GB的7200K rpm磁盘,同样进行了RAID5配置(第1到第15块硬盘进行RAID5配置,第16块盘作为热备冗余),有效存储空间也为6T左右。由于媒资系统设定的低码流文件格式为WMV,码率300kbs,所需存储空间很小,元数据的大小更是可以忽略不计,所以这台单独的流媒体存储管理服务器提供了足够低码率文件和相关元数据长期存储的空间,同时还为媒资流程中需要浏览、粗编低码流素材的节点提供相关服务。

  近线带库方面,基于对单个磁带库稳定性和性的要求,我们选择了HP EML 103e.

  带库的基础模块包括共103个磁带存储节点,加载箱的5个节点在可以移动的暗盒里,而且可被配置为载入载出节点或存储节点。图中③所示部分可以指定9个节点作为预留,预留节点常用来存放清洗带。固定可用的节点数取决于是否已达到带库的底端,因为带库的底端通常紧邻基础模块,底部限制了机械臂可以移动的距离。如果带库底端紧邻基础模块,*下面的两排(16个节点)就不可用。由于我们前期并没有进行扩容,而且考虑到放入取出磁带的日常需要,所以目前有效的磁带存储节点共有103-5=98个。

  磁带驱动器和磁带的相关技术已经非常成熟,*为业界熟知的莫过于LTO技术——线性磁带开放协议(Linear Tape Open)。作为当今数据存储业*可靠的格式之一,LTO技术通过使用薄磁性层实现了高密度存储和高输出读取数据,它结合了线性多通道双向磁带格式的优点,基于服务系统、硬件数据压缩、优化的磁道面和高效率纠错技术,以提高磁带的容量和性能。LTO具有两种存储格式:高速开放磁带格式Ultrium和快速访问开放磁带格式Accelis,定制两种格式是因为并不是所有的用户都要求相同的特性和功能性。一些应用程序强调重点在“读”,要求快速的数据访问速度。而另一些应用程序则重点在于“写”,要求*高的磁带存储能力。

(责任编辑:景帝www.ijingdi.com)

关于我们| 易展动态| 易展荣誉| 易展服务| 易家文化| 英才集结号| 社会责任| 联系我们

备案号:粤ICP备11010883号| 公安机关备案号:44040202000312| 版权问题及信息删除: 0756-2183556  QQ: 服务QQ

Copyright?2004-2017  珠海市金信桥网络科技有限公司 版权所有

行业网站百强奖牌 搜索营销*有价值奖 中小企业电子商务**服务商
以上信息由企业自行提供,信息内容的真实性、准确性和合法性由相关企业负责,易展仪表展览网对此不承担任何保证责任。