a&s专业的自动化&安全生态服务平台
公众号
安全自动化

安全自动化

安防知识网

安防知识网

手机站
手机站

手机站

大安防供需平台
大安防供需平台

大安防供需平台

资讯频道横幅A1
首页 > 资讯 > 正文

【原创】当低码率遇到手机监控 迟来的基情

手机监控真的听起来很不错,虽然它的稳定性,堪比——周期乱掉的大姨妈!那到底为什么我们觉得手机监控这么坑爹呢?是我们掉入了刻板印象的怪圈,用“不稳定”来苛求这个稚嫩的技术?还是手机厂家拔高自己所爱,人为打压同行产品?这究竟是人性的扭曲?还是道德的败坏 下面就让我们走进科学,揭秘手机监控背后隐藏着的故事。
资讯频道文章B

【安防知识网】手机监控真的听起来很不错,虽然它的稳定性,堪比——周期乱掉的大姨妈!那到底为什么我们觉得手机监控这么坑爹呢?是我们掉入了刻板印象的怪圈,用“不稳定”来苛求这个稚嫩的技术?还是手机厂家拔高自己所爱,人为打压同行产品?这究竟是人性的扭曲?还是道德的败坏...下面就让我们走进科学,揭秘手机监控背后隐藏着的故事。

  智能手机监控(以下简称手机监控)相对于传统监控最大的特点就是“AnyTime、AnyWhere、AnyDevice”(任何时间、任何地点、任何设备),实现手机监控的三大要数是智能手机、摄像机和3G网络。摄像机和智能手机是手机监控的前后端,摄像机通过有线或者3G网络和互联网连接,智能手机通过3G网络和互联网连接,从而形成摄像机和智能手机的视频信号通道连接,下面分别探讨这三大要素目前的状况以及在手机监控中实现高清视频的可能性。

  智能手机和3G网络现状

  2013年7月,工信部发布了《2013年上半年电信业统计分析》,文中指出:“3G移动电话用户净增8606.6万户,超过去年全年净增量80%,总数达3.19亿户”,从这些数字可以看出3G用户数量发展迅猛。如此庞大的基数,为通过3G网络部署的手机监控应用提供了广泛的用户基础;同时,以ios和android操作系统为代表的智能手机和平板电脑也迅速普及,主流智能手机的屏幕分辨率也发展到了如今的1280×720,甚至出现了1920×1080这样的全高清分辨率,这使得智能手机完全可以支持高清分辨率的视频应用;使用这些便携智能终端,加上3G网络的支撑,用户可以随时随地地观看来自任何地点摄像机的监控视频,这种的便捷性会大大促进手机监控应用的发展。

  在基于IP网络的监控系统中,网络摄像机作为视频信息的采集者直接决定了监控系统中视频信息量。目前, 高清摄像机已经被普遍应用在监控系统中,对于摄像机来讲,更高的分辨率,就可以提供了更多的细节特征或者更大的视野范围,这些对于监控应用无疑是有利的。从安防监控摄像机的发展来看,主流分辨率经历了CIF、D1到现在的百万像素、二百万像素甚至五百万像素,这样的一个发展过程充分体现了监控应用对高分辨率的不断追求。以前制约手机监控应用中使用高清分辩率的主要技术障碍就是无线网络带宽不足和手机屏幕分辨率过低,而随着智能手机和3G网络的发展,智能手机已经完全能胜任高清视频的显示,无线网络带宽也比2G时代有了很大的提高,手机监控的高清应用将破茧而出。

  低码率视频的必要性

  前面提到3G的带宽比2G有了很大的提高,那么目前在传统监控中应用的高清摄像机是否可以直接用在手机监控中的高清应用呢?首先我们看看3G的实用带宽是多少?国内的三个3G网络分别是联通的W-CDMA、电信的CDMA2000和移动的TD-CDMA,理论上传速率从0.384Mb/s到5.76Mb/s,理论下载速率从2.8Mb/s到14.4Mb/s。但这三个网络均是采用共享模式,每个基站提供的带宽都是有限的,同一时间服务的用户数量越多,每个用户所获得的平均网速就会越慢,所以实际应用中的速率会远低于理论值。在市区住宅实测TD-SCDMA的下载速度大约为430 Kbps,CDMA2000的下载速度大约为720Kbps,W-CDMA的下载速度大约为1120 Kbps。另外,根据2012年10月份,UMNet移动网络质量评估平台发布的《全国3G用户体验速率数据报告》显示,“2012年10月份我国平均3G感知速率为52.51KB/S(420kbps)”,从这些数据可以看出,实际的3G网络速率与理论值有较大的出入,比较容易得到的带宽大概是512kbps。其次我们再看看传统监控应用中的高清摄像机需要的带宽是多少?720P的高清视频码率大约是2Mbps,1080P的高清视频码率大约是4Mbps,很明显即使是720P高清视频所需要的带宽也远远大于3G所能提供的带宽,所以传统监控应用中的高清摄像机不能在手机监控中得到高清效果,只有降低高清摄像机的编码码率,才可能在3G网络中使用高清视频。低码率不仅意味着相同传输带宽条件下可以实现更高的分辨率,还更有利于对抗传输网络的实时带宽抖动。

  从另一个方面来看,通信费用也是一个制约手机监控应用普及的重要因素。国内3G网络实际使用费用不菲,以中国电信天翼3G资费为例,189元的套餐包含了1GB的流量,超出部分按0.0003元/KB计算,如果视频码率为512kbps,每个月只能看1024×1024×8/512=16384秒=273分钟=4.55小时,平均每天只能看9.1分钟。在这种情况下,实现低码率的视频数据传输,可以大大降低通信费用,这对那些小型企业和家庭用户更加有利,他们对通信费用更加敏感,而这些用户在数量上占据了更大的比重。降低通信费用,意味着降低了手机监控的应用门槛,从这个意义上讲,实现低码率摄像机,有利于促进手机监控应用的普及和发展。

  手机监控应用中的存储位置,可以位于摄像机的本地存储设备(通常是SD卡),或者客户端(例如智能手机)的本地存储,也可能位于网络中(云存储),无论哪一种方式,用户都会倾向于更小的存储空间占用。低码率的视频编码文件,无疑更适合存储要求。

  通过以上的分析,低码率和高清对于基于3G网络的手机监控应用都是需要的。针对智能手机的主流分辨率,1280×720×25fps是一个比较适中的摄像机视频输出指标;在此基础上,只要能把码率限制在512kbps以下,就能基本满足通过3G网络部署手机高清监控应用的需求,而且目前最普及的ADSL和家庭光纤上传带宽就是512kbps,高清摄像机的码率控制在512kbps以下将可以大大扩展手机监控的应用范围。

  低码率高清摄像机设计与实现

  通过上面的探讨可以知道码率低于512kbps的高清摄像机可以实现手机监控的高清应用,即使不用高清,低码率也可以降低手机监控的使用成本。为了使高清摄像机大幅降低码率,不仅要采用H.264等先进的编码算法,而且要从系统的角度全面考虑,从摄像机的各个环节降低码率。

  1、选择低噪声的图像传感器

  图像传感器是获取视频信号的源头,选择高信噪比的低噪声传感器是必须的,这为后续处理提供了基础条件。

  2、注重降噪的图像处理过程(ISP)

  清晰而且低噪声的图像是获得低码率视频的首要条件, 图像噪声混入到图像细节特征中,会大大增加后续编码过程的信息量,从而增加码流。所以首先要获取清晰而且低噪声的图像,这对图像处理过程(ISP)提出了一些要求。ISP主要包括demosaic、滤波、锐化、白平衡、曝光控制、gamma校正等处理过程,其中滤波和锐化处理对噪声影响最大。滤波算法很多,我们需要选择能保持边缘信息的滤波算法,这样才不会降低清晰度;应用3D滤波也是一个不错的选择,它可以利用到帧间信息。滤波和锐化共同作用的结果,才能获得低噪声的清晰图像,然后进行下一步的视频编码处理。

  3、选择高压缩率的视频编码器

  H.264作为一个成熟的视频编码标准,已经广泛使用在网络摄像机中,而且也被智能手机普遍支持。基于这个原因,如同其他摄像机厂商一样,我们也同样选择H.264视频编码器来进行视频编码。再进一步,我们选择了Main Profile,理由是可以使用B帧和CABAC编码。这两个功能对降低码率有很大的作用,B帧可以进行双向预测,使得预测更加准确,可以减少码流;同时还可以设置解码后的B帧不再做为参考帧,这样就可以把量化造成的误差局限在本帧范围内而不继续扩散,因此可以适当增大B帧的量化参数,减少码流的同时而不对视频质量造成明显损害。相对于CAVLC编码,在相同编码信息源数据的情况下,CABAC编码可以节约10%左右的码流,这个差距足以令CABAC成为我们的不二的选择。

  4、优化视频编码码流

  H.264编码中存在I帧,P帧和B帧。其中I帧是帧内预测编码,尽可能实现全部帧内预测方式,这样可以提高预测准确性,减少残差数据量,从而降低码流。 在一个GOP中,P帧和B帧的数量远远大于I帧,所以这两种帧编码是决定视频码流大小的主要因素。对于P帧和B帧编码,帧间预测的准确性直接决定了残差信息量,因此必须尽可能提高预测准确性,手段包括增加参考帧和扩大搜索范围;受硬件资源的制约,在摄像机中实现全像素搜索是不现实的,但是搜索点数太少会严重影响搜索精度,因此应该尽可能增加搜索点数,获得高的搜索精度,最后再用1/2像素和1/4像素匹配最佳位置。

  5、根据像素信息重要性分配宏块QP

  量化参数QP直接决定了画面质量,同时对码率大小也有极大影响。增加QP,量化误差增大,画面细节丢失,码率变小;减小QP则会产生相反的影响;这就为选择合适的QP值带来困惑。理想的解决方式是:画面中包含重要信息的部分需要细节,这些部分应该使用较小的QP值;画面的其他部分则不需要过多细节,这些地方可以使用相对较大的QP值。通过这种变化QP的方式,可以大大减少画面中不关注细节部分的编码码流,同时又不会危害到画面中的监控对象画面,这是降低码流的一个重要环节。

  6、实施智能分析

  智能分析是指对图像进行分析,主要有两个功能:运动分析和图像区域分析。运动分析是为了获得视频中的运动物体,如人和车辆等物体,分析结果可以进一步用于入侵检测等告警规则;图像区域分析是实现QP分配的基础条件,分析结果是获得运动区域和静止区域的分布,通常静止区域都是一些背景区域,这些区域可以在H.264编码过程中应用较大的QP值,达到减小码率的目的。

  7.应用码率智能自适应控制

  3G网络的实时有效带宽处于一个不断变化的波动状态,及时有效地匹配视频输出码率和实时可用带宽,可以提高网络传输效率,从而在相同条件下为客户端提供更好质量的视频码流。网络实时带宽是不可预知因素,考虑到瞬间的带宽抖动不会对通信造成实质影响,我们只需要针对作用时间较长的慢速抖动进行处理,可以预设一个基本带宽参数,然后检测码流发送过程中的TCP的拥塞状态,据此进行修正,作为实时带宽的近似值。

  场景内容(包括环境光线条件)的变化是引起码率主动变化的主要因素,而码率适应过程则是需要动态调整若干参数,这些参数包括:视频帧率、量化参数QP、视频滤波强度、图像锐化强度和图像分析灵敏度等,分别分布在ISP、智能分析、H.264编码等多个处理环节。每个参数对码率的影响不同,需要调整哪些参数,以及调整的幅度,需要一个比较复杂的控制策略来实现,这个过程就是码率智能自适应控制。码率自适应控制需要较高的实时性;另外,为了保证码率变化的平滑过渡,参数调整过程也需要进行渐变过渡,这样才能获得较佳的视觉效果。

  主芯片的选择

  目前,网络摄像机基本上都采用单芯片的解决方案,可供选择的主要包括ASIC和FPGA,传统高清摄像机大多采用ASIC芯片厂商提供的摄像机解决方案,所以这些摄像机都不能实现低码流高清。为了实现低码流高清,可以FPGA, FPGA具有并行处理机制能带来实时性和高性能,而且设计灵活,便于实现低码率目标所需要的全部处理过程。

  结束语

  通过以上分析, 低码率高清摄像机在手机监控应用有着现实的意义,技术上也完全可行。我们已经使用单片altera的CYCLONE IV(EP4CE115)作为主芯片,实现了低码率高清摄像机(GlobalEagle)的最大分辨率和帧率是1280×720×25fps,平均码率小于512Kbps。随着FPGA工艺的进步,FPGA的资源越来越多,运动宏块的预测可以做到越来越准确,编码码流会越来越少,下一步我们准备用CYCLONE V来实现1920×1080×25fps的平均码率小于1024Kbps的低码率高清摄像机。

参与评论
回复:
0/300
文明上网理性发言,评论区仅供其表达个人看法,并不表明a&s观点。
0
关于我们

a&s是国际知名展览公司——德国法兰克福展览集团旗下专业的自动化&安全生态服务平台,为智慧安防、智慧生活、智能交通、智能建筑、IT通讯&网络等从业者提供市场分析、技术资讯、方案评估、行业预测等,为读者搭建专业的行业交流平台。

免责声明:本站所使用的字体和图片文字等素材部分来源于互联网共享平台。如使用任何字体和图片文字有冒犯其版权所有方的,皆为无意。如您是字体厂商、图片文字厂商等版权方,且不允许本站使用您的字体和图片文字等素材,请联系我们,本站核实后将立即删除!任何版权方从未通知联系本站管理者停止使用,并索要赔偿或上诉法院的,均视为新型网络碰瓷及敲诈勒索,将不予任何的法律和经济赔偿!敬请谅解!
© 2020 Messe Frankfurt (Shenzhen) Co., Ltd, All rights reserved.
法兰克福展览(深圳)有限公司版权所有 粤ICP备12072668号 粤公网安备 44030402000264号
用户
反馈