(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202211205586.6 (22)申请日 2022.09.30 (65)同一申请的已公布的文献号 申请公布号 CN 115294533 A (43)申请公布日 2022.11.04 (73)专利权人 南通羿云智联信息科技有限公司 地址 226000 江苏省南 通市开发区广州路 42号401室 (72)发明人 张杰　邱凯铤　 (74)专利代理 机构 邯郸泽科知识产权代理有限 公司 13169 专利代理师 田云 (51)Int.Cl. G06V 20/52(2022.01) G06V 20/17(2022.01)G06V 10/22(2022.01) G06V 40/20(2022.01) G06V 40/10(2022.01) G06V 10/74(2022.01) G06V 10/82(2022.01) G06N 3/08(2006.01) G06Q 50/08(2012.01) 审查员 李颖 (54)发明名称 基于数据处 理的建筑施工状态监测方法 (57)摘要 本发明涉及数据处理技术领域， 具体涉及一 种基于数据处理的建筑施工状态 监测方法， 该方 法采集建筑施工现场的多帧全景图， 以将每帧全 景图划分为工人区域和建筑设备区域； 对工人区 域的每个工人进行人体关键点检测， 构建动作数 据库， 以将其包括的各种危险施工动作的人体关 键点坐标与每个工人的人体关键点坐标进行对 比， 分析每个工人的施工行为状态； 检测工人的 安全帽佩戴情况和每个建筑设备区域内的设备 施工状态， 以根据施工行为状态、 安全帽佩戴情 况和设备施工状态进行危险预警。 通过分区域检 测提高了检测精度， 避免整体分析复杂环境的影 响， 同时能够及时对出现问题的施工工具、 设备 进行检修， 提升施工效率， 保证施工过程的安全 问题。 权利要求书2页 说明书8页 附图1页 CN 115294533 B 2022.12.20 CN 115294533 B 1.一种基于数据处理的建筑施工状态监测方法， 其特征在于， 该方法包括以下具体步 骤： 采集建筑施工现场的多帧全景图； 对全景图进行人体关键点检测以将全景图划分为无 人区域和工人区域； 基于建筑设备的位置将无 人区域划分为多个建筑设备区域； 对工人区域中的每个工人进行人体关键点检测， 得到每个工人的人体关键点的二维坐 标； 将当前工人的所有 人体关键点的二 维坐标组成二维序列， 利用TCN网络得到二 维序列对 应的三维序列， 将当前工人在多帧全景图中的所述三维序列 组成一个三维动作序列； 基于 模拟器构建多种危险施工动作的动作数据库， 基于动作数据库获取每个工人的施工行为状 态指标； 对每个工人进行安全帽佩戴检测得到每个工人 的安全帽佩戴指标， 将每个工人 的 施工行为状态指标和安全帽佩戴指标构建2*N 维的工人区监测矩阵， N指 工人数量， 且N为正 整数； 根据建筑设备区域中建筑设备的实时状态和正常工作中的标准状态之间的状态相似 度， 得到每个建筑设备区域的设备施工状态指标， 以构成1*M维的施工设备监测矩阵， M为建 筑设备数量， 且M为 正整数； 根据所述工人区监测矩阵和所述施工设备监测矩阵分别对工人和建筑设备进行危险 预警； 所述基于模拟器构建多种危险施工动作的动作数据库的方法， 包括： 利用模拟器获取当前危险施工动作 下各个人体关键点的标准三维坐标， 构 成一个标准 三维坐标序列； 将多种危险施工动作及其对应的标准 三维坐标序列构成一个动作数据库； 所述基于动作数据库获取每 个工人的施工行为状态指标的方法， 包括： 根据当前工人的三维动作序列与动作数据库中每个标准三维坐标序列分别计算当前 工人对应 每个危险施工动作的施工行为状态指标； 将最大的施工行为状态指标作为当前工人最终的施工行为状态指标； 所述施工行为状态指标的计算公式为： 其中， 为施工行为状态指标； 为工人的三维动作序列的序列长度； 为工人的人体关 键点的数量； 为工人的人体关键点 在第 帧全景图对应的三维坐标；   为标准三维坐标序列中人体关键点 的标准三维坐标； 所述对每 个工人进行安全帽佩戴检测得到每 个工人的安全帽佩戴指标的方法， 包括： 利用目标检测网络获取工人的安全帽包围框和人体包围框， 计算安全帽包围框和人体 包围框之 间的相交面积， 将相交面积和安全帽包围框的面积之 间的比值作为每个工人的初 始佩戴检测指标； 基于初始佩戴检测指标， 根据工人位置和安全帽位置确认每个工人的安全帽佩戴指 标， 则安全帽佩戴指标的计算公式为： 权　利　要　求　书 1/2 页 2 CN 115294533 B 2式中， 为安全帽佩戴指标； 为安全帽包围框的左上角坐标、 为安全帽包围框 的右下角坐标， 为第一距离； 为安全帽包围框的中心点坐标， 为工人面部的中 心点坐标， 为第二距离； 为初始佩戴检测指标； 为佩戴检测指标阈值。 2.如权利要求1所述的一种基于数据处理的建筑施工状态监测方法， 其特征在于， 所述 每个建筑设备区域的设备施工状态指标的获取 方法， 包括： 获取各个建筑设备区域图像和各个建筑施工设备正常工作时的标准状态图像所构成 标准状态集； 分别对每个建筑设备区域图像和标准状态图像进行相同特征点的提取， 将每 个建筑设备区域图像分别与标准状态集中每个标准状态图像进行特征点匹配， 得到多个特 征点对； 根据匹配好的特征点对计算第 个建筑设备区域图像与标准状态集中第 张标准状态图 像之间的相似程度， 进而得到第 个建筑设备区域图像的相似程度集合， 将相似程度集合中 最大相似程度作为第 个建筑设备区域的设备施工状态指标， 其相似程度的计算公式为： 式中， 为匹配的特征点对的数量， 代表第 对特征点对之间的欧式距离， 为第 个建筑设备区域图像与第 张标准状态图像之间的相似程度。权　利　要　求　书 2/2 页 3 CN 115294533 B 3