著录项信息
专利名称 | 基于上下文感知的智能移动终端现场监测方法 |
申请号 | CN201310633880.1 | 申请日期 | 2013-11-30 |
法律状态 | 驳回 | 申报国家 | 中国 |
公开/公告日 | 2014-04-09 | 公开/公告号 | CN103716584A |
优先权 | 暂无 | 优先权号 | 暂无 |
主分类号 | 暂无 | IPC分类号 | 暂无查看分类表>
|
申请人 | 南京大学 | 申请人地址 | 江苏省镇江市经十二路468号双子楼A座1609室
变更
专利地址、主体等相关变化,请及时变更,防止失效 |
权利人 | 南京大学 | 当前权利人 | 南京大学 |
发明人 | 阮雅端;陈湘军;陈飞玲;施静静;郁建桥;陈启美 |
代理机构 | 南京天翼专利代理有限责任公司 | 代理人 | 黄明哲 |
摘要
基于上下文感知的智能移动终端现场监测方法,设置监测系统进行监测,监测系统包括视频采集端、服务器端和视频播放端,所述视频采集端、服务器端和视频播放端通过网络连接,智能移动终端采集现场视频数据,将视频数据与对应上下文数据传输至服务器端,视频播放端通过网络连接服务器端,调看视频,实现现场监测。本发明可以灵活方便地在任何时候任何地点进行实时的视频采集及传输,并且集成了现场视频位置信息等上下文感知信息,减小交互瓶颈,使得用户不再需要人为地对视频进行分类、添加备注,方便于对视频进行搜索分析,使得系统具有更强的适应性;采用混合方式的3G手机视频传输QOS策略,视频质量好,画面流畅。
1.基于上下文感知的智能移动终端现场监测方法,其特征是设置监测系统进行监测,监测系统包括视频采集端、服务器端和视频播放端,所述视频采集端、服务器端和视频播放端通过网络连接,其中
视频采集端采用智能移动终端设备,包括3G智能手机和平板,智能移动终端设备设有摄像头,采集视频数据,智能移动终端设备自身的传感器配合感知现场的对应上下文数据;
智能移动终端设备通过3G网络将视频数据与对应上下文数据传输至服务器端,上下文数据结合视频参数生成的XML视频摘要和视频数据中的I帧使用面向连接的TCP连接,视频数据中的P帧使用UDP传输;
服务器端提供数据存储、视频流生成及视频调看服务的功能,服务器端将由视频采集端接收到的视频数据打包成RTSP流,并构造Web直播服务器,视频数据的地址与对应上下文信息存储在服务器端的数据库中,通过Web直播服务器的视频列表界面与服务调用接口向视频播放端提供视频查询与播放服务;
所述现场监测方法具体为:智能移动终端采集现场视频数据,通过预录不同分辨率的本地文件获取视频参数,并在智能移动终端进行存储,将摄像头采集到的视频数据重定向到本地Socket端口,再从本地Socket端口截获数据,从而得到实时网络视频数据流;提取视频数据的关键帧I帧,与智能移动终端设备自身的其它传感器感知到的现场位置、温度,结合视频参数,生成XML摘要;视频采集端将数据传输至服务器端,视频播放端通过网络连接服务器端,调看视频,实现现场监测。
2.根据权利要求1所述的基于上下文感知的智能移动终端现场监测方法,其特征是对智能移动终端设备的视频数据采用混合方式的3G视频传输QOS策略,包括本地无损存储、TCP与UPD混合传输、丢帧及自适应码流调整:
1)、本地无损存储流,在智能移动终端设备的存储器中设置一个固定存储空间,循环保存无丢包的视频,在Wi-Fi或USB条件下,再通过IP网络将存储的视频数据转存至服务器端;
2)、TCP与UDP混合传输,采用TCP协议与UDP协议混合传输视频数据,TCP协议用于传输视频数据的I帧、视频参数及控制指令,UPD协议用于传输视频数据的P帧;
3)、丢帧,当智能移动终端设备的网络发送速率S小于视频采集码流K,并持续5s以上,启动丢帧,丢弃一些P帧用于改善因短时网络质量原因造成的阻塞问题;
4)、自适应码流调整,当智能移动终端设备的网络发送速率持续小于视频编码速度时,判定为带宽容量不够,此时采取改变分辨率与帧率的方法自适应调整摄像头采集码流:分辨率调整按CIF→QVGA→QCIF顺序调整,帧率改变使用TCP传输模型中的加法增加倍数减少AIMD拥塞控制算法,当网络传输被判定为轻载时,加性尝试增加帧率,当拥堵时,乘性减少帧率。
3.根据权利要求2所述的基于上下文感知的智能移动终端现场监测方法,其特征是视频传输QOS策略实施时,计算智能移动终端设备当前编码条件下的码流K,并实时监听智能移动终端设备的线程网络发送流量S,当S持续小于K时,产生网络阻塞,采用状态监听计时的方法进行码流调节,分别取c1=0.85、c2=0.5、c3=0.25作为丢帧、降帧率及改变分辨的阈值,当S4.根据权利要求1或2或3所述的基于上下文感知的智能移动终端现场监测方法,其特征是智能移动终端设备感知的对应上下文数据源于外部上下文和内部传感器,外部上下文包括网络环境、用户交互及系统时间,内部传感器包括GPS/Wi-Fi接入、加速器、陀螺仪、摄像头和麦克风,所述内部传感器捕获智能移动终端设备持有者所在位置与方向,出行模式及周边图像与声音环境。
5.根据权利要求1或2或3所述的基于上下文感知的智能手机现场监测方法,其特征是所述视频采集端采集的视频数据为H.264视频流数据。
6.根据权利要求1或2或3所述的基于上下文感知的智能手机现场监测方法,其特征是视频播放端包括计算机PC、智能手机和平板电脑,视频播放界面包括视频播放器和浏览器。
7.根据权利要求1或2或3所述的基于上下文感知的智能手机现场监测方法,其特征是智能移动终端采集现场视频数据时,通过预录不同分辨率的本地文件获取视频参数,不同分辨率包括标准化图像格式CIF、四分之一标准化图像格式QCIF和四分之一视频图形阵列QVGA。
引用专利(该专利引用了哪些专利)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 |
1
| |
2011-08-10
|
2011-04-14
| | |
2
| |
2010-06-09
|
2009-11-16
| | |
3
| |
2012-03-07
|
2011-10-24
| | |
4
| |
2012-05-16
|
2010-10-25
| | |
被引用专利(该专利被哪些专利引用)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 | 1 | | 2015-08-10 | 2015-08-10 | | |
2 | | 2015-11-24 | 2015-11-24 | | |
3 | | 2016-03-24 | 2016-03-24 | | |