(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210749385.6 (22)申请日 2022.06.29 (71)申请人 睿云联 （厦门） 网络通讯技 术有限公 司 地址 361000 福建省厦门市 火炬高新区软 件园创新大厦C区3F-A 917 (72)发明人 蔡如意　陈少伟　 (74)专利代理 机构 厦门原创专利事务所(普通 合伙) 35101 专利代理师 许丹青 (51)Int.Cl. H04N 7/14(2006.01) H04N 7/18(2006.01) H04N 5/781(2006.01) H04L 65/10(2022.01)H04L 65/65(2022.01) (54)发明名称 对讲机的双向对讲音视频的NVR录制方法、 设备及介质 (57)摘要 本发明提供了一种对讲机的双向对讲音视 频的NVR录制方法， 包括： 本地对讲机与NVR设备 协商格式及端口； 本地对讲机与远端对讲机协商 格式及端口； 远端对讲机采集数据编码并封装， 发给本地对讲机； 本地对讲机接收并解析， 进入 解码器进行解码， 再传送给远端音频设备和远端 摄像头； 本地摄像头和本地音频设备采集音视频 数据； 根据本地视频数据和远端视频数据进行图 像合成， 根据本地音频数据和远端音频数据进行 混音处理； 将合成后的视频数据和混音后的音 频 数据转给视频编码器和音 频编码器进行编码， 打 包成视频包和音频包， 发送端口发送给NVR设备。 本发明还提供一种电子设备和计算机可读存储 介质， 实现双向音视频的录制。 权利要求书2页 说明书7页 附图6页 CN 115118909 A 2022.09.27 CN 115118909 A 1.一种对讲机的双向对讲音视频的NVR录制方法， 所述方法需提供本地对讲机、 NVR设 备和远端对讲机， 其特征在于， 所述本地对讲机设有本地摄像头、 远端摄像头、 本地音频设 备、 远端音频设备、 音频编 码器、 音频解码 器、 视频编码 器及视频解码 器， 所述方法包括如下 步骤： 步骤1、 所述本地对讲机与NVR设备协商好在录制时采用的音视频格 式以及音视频的发 送端口； 步骤2、 所述本地对讲机与远端对讲机协商好在对讲时双方的音视频格式以及音视频 的收发端口； 步骤3、 所述远端对讲机采集远端的音视频数据进行编码并封装， 再根据协商好的音视 频格式以及音视频的收发端口将封装后的音视频数据发送给本地对讲机； 所述本地对讲机 接收该封装后的音视频数据并解析， 将解析后的音视频数据分类并分别进入对应的音频解 码器和视频解码器进行解码处理， 得到解码后的音频数据和视频数据， 再分别传送给远端 音频设备和远端摄 像头； 步骤4、 所述本地摄 像头和本地音频设备采集本地的音视频 数据； 步骤5、 根据所述本地摄像头采集的本地视频数据和远端摄像头获取的远端视频数据 进行图像合成， 同时， 根据所述本地音频设备采集的本地音频数据和远端音频设备获取 的 远端音频数据进行混音处 理； 步骤6、 将合成后的视频数据和混音后的音频数据分别转给对应的视频编码器和音频 编码器进行编码处理后， 打包成视频包和音频包， 根据协商好的音视频格式 以及音视频 的 发送端口发送给NVR设备进行录制。 2.根据权利要求1所述的一种对讲机的双 向对讲音视频的NVR录制方法， 其特征在于， 所述本地对讲机还设有ONVIF设备， 所述 步骤1具体包括： 步骤11、 所述NVR设备通过ONVIF发现协议进行广播以搜索ONVIF设备； 步骤12、 所述ONVIF设备收到该ONVIF发现协议后， 应答ONVIF  Web Service地址给NVR 设备； 步骤13、 所述NVR设备接收到该ONVIF  Web Service地址后， 再发送查询RTSP地址请求 给ONVIF设备； 步骤14、 所述ONVIF接收到该查询RTS P地址请求后， 应答对应的RTS P地址给NVR设备； 步骤15、 所述 NVR设备根据该RTS P地址向本地对讲机发起RTS P请求； 步骤16、 所述本地对讲机根据该RTSP请求与NVR设备协商好在录制时采用的音视频格 式以及音视频的发送端口。 3.根据权利要求1所述的一种对讲机的双 向对讲音视频的NVR录制方法， 其特征在于， 所述步骤2具体包括： 所述本地对讲机通过SIP协议与远端对讲机协商好在对讲时双方的音视频格 式以及音 视频的收发端口。 4.根据权利要求1所述的一种对讲机的双 向对讲音视频的NVR录制方法， 其特征在于， 所述步骤3具体包括： 所述远端对讲机采集音频数据， 经过远端对讲机 内的音频编码器将该音频数据编码成 G711A/U、 G722、 G729或OPUS格式的音频压缩数据， 再将该音频压缩数据打包成音频RTP包，权　利　要　求　书 1/2 页 2 CN 115118909 A 2根据协商好的音视频格式以及音视频的收发端口将音频RTP包发送给本地对讲机； 所述本 地对讲机接收该音频RTP包并解析， 得到音频压缩数据， 并发送给音频解码器进行解码， 解 码后得到音频 数据， 传递给远端 音频设备， 缓存在数据池中； 同时， 所述远端对讲机采集视频数据， 经过远端对讲机内的视频编码器将该视频数据 编码成H264 或H265格式的视频压缩 数据， 再将该视频压缩 数据打包成视频RTP包， 根据 协商 好的音视频格式以及音视频的收发端口将视频RTP包发送给本地对讲机； 所述本地对讲机 接收该视频RTP包并解析， 得到视频压缩数据， 并发送给视频解码器进行解码， 解码后得到 视频数据， 传递给远端摄 像头， 缓存在数据池中。 5.根据权利要求1所述的一种对讲机的双 向对讲音视频的NVR录制方法， 其特征在于， 所述步骤5中根据所述本地摄像头采集的本地视频数据和远端摄像头获取的远端视频数据 进行图像合成， 具体包括： 在获取到所述本地摄像头采集的本地视频数据的时候， 查询下远端摄像头 中是否有远 端视频数据， 如果有， 则获取远端视频数据， 并与本地视频数据进行缩放操作， 将远端视频 和本地视频按照自定义的比例合成在一个画面中； 如果没有， 则将本地视频填满整个画面。 6.根据权利要求1所述的一种对讲机的双 向对讲音视频的NVR录制方法， 其特征在于， 所述步骤5中根据所述本地音频设备采集的本地音频数据和远端音频设备获取的远端音频 数据进行混音处 理， 具体包括： 判断所述远端音频设备是否存在远端音频数据， 如果不存在， 则直接将本地音频数据 转给音频编码 器； 如果存在， 则取出所述远端音频设备中时间T内的远端音频数据与当前本 地音频设备获取的时间T内的本地音频 数据进行混音处 理。 7.根据权利要求1所述的一种对讲机的双 向对讲音视频的NVR录制方法， 其特征在于， 所述步骤6具体包括： 将合成后的视频数据转给视频编码器进行编码， 生成H264、 H265或JPEG格式的视频压 缩数据， 再将该视频压缩 数据打包成视频RTP包， 根据协商好的音视频格式以及 音视频的发 送端口发送给NVR设备进行视频录制； 同时， 将混音后的音频数据转给音频编码器进行编码， 生成G711A/U、 G722、 G729或OPUS 格式的音 频压缩数据， 再将该音 频压缩数据打包成音 频RTP包， 根据协商好的音视频格式以 及音视频的发送端口发送给NVR设备进行音频录制。 8.根据权利要求1所述的一种对讲机的双 向对讲音视频的NVR录制方法， 其特征在于， 所述本地对讲机为梯口机或门口机， 所述远端对讲机为室内机、 APP、 模拟电话或物业管理 机。 9.一种电子设备， 包括存储器、 处理器及存储在存储器上并可在处理器上运行的计算 机程序， 其特征在于， 所述处理器执行所述程序时实现如权利要求1至8任一项所述的一种 对讲机的双向对讲音视频的NVR录制方法。 10.一种计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 该程序被处理器 执行时实现如权利要求1至8任一项所述的一种对讲机的双向对讲音视频的NVR录制方法。权　利　要　求　书 2/2 页 3 CN 115118909 A 3