(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210453694.9 (22)申请日 2022.04.27 (71)申请人 光沦科技 （深圳） 有限公司 地址 518000 广东省深圳市粤海街道高新 区社区高新南七道018号高新工业村 R3-B栋01层204 (72)发明人 田宜彬　曾智　张雪洋　范晓慧　 张志远　 (74)专利代理 机构 北京清亦华知识产权代理事 务所(普通 合伙) 11201 专利代理师 何世磊 (51)Int.Cl. G06T 7/00(2017.01) G06V 10/762(2022.01) G06V 10/54(2022.01)G06V 10/56(2022.01) G06V 10/80(2022.01) G06V 10/82(2022.01) G06V 10/143(2022.01) G06T 15/04(2011.01) (54)发明名称 下颌运动轨迹测量方法、 系统、 计算机及可 读存储介质 (57)摘要 本发明提供了一种下颌运动轨迹测量方法、 系统、 计算机及可读存储介质， 该方法包括通过 在右侧、 左侧以及中间二维面部图像的下颌处均 添加若干目标点， 且在中间二维面部图像的鼻部 或者额头处添加若干参考点； 分别计算出目标点 以及参考点对应的三维坐标， 并根据三维坐标以 及半全局代 价聚类算法生 成右侧、 中间以及左侧 三维面部模型； 将右侧、 中间以及左侧三维面部 模型拼接为完整三维面部模型， 并将完整三维面 部模型与纹理图像进行融合， 以生成彩色三维面 部模型； 在彩色三维面部模型中分别计算出每一 目标点对应的运动轨迹。 通过上述方式能够基于 彩色三维面部模型分别计算出每个目标点的运 动轨迹， 大幅降低了受试者以及使用者的负担 。 权利要求书2页 说明书9页 附图2页 CN 114862782 A 2022.08.05 CN 114862782 A 1.一种下颌运动轨 迹测量方法， 其特 征在于， 所述方法包括： 通过至少三组相机分别对应采集测量目标的右侧、 中间以及左侧二维面部 图像， 并在 所述右侧二 维面部图像、 所述左侧二 维面部图像以及所述中间二 维面部图像的下颌处均添 加若干目标点， 且在所述中间二维面部图像的鼻部或者 额头处添加若干参 考点； 基于第一预设算法分别计算出每一所述目标点以及每一所述参考点对应的三维坐标， 并根据所述三维坐标以及半全局代价聚类算法生成与所述右侧、 中间以及左侧二 维面部图 像对应的右侧、 中间以及左侧三维面部模型； 基于第二预设算法将所述右侧三维面部模型、 所述中间三维面部模型以及所述左侧三 维面部模型拼接为完整三 维面部模型， 并将所述完整三 维面部模型与所述相机采集到的纹 理图像进行融合， 以生成彩色三维面部模型； 以若干所述参考点的中心为原点， 并基于第 三预设算法在所述彩色三维面部模型中分 别计算出每一所述目标点对应的运动轨 迹。 2.根据权利要求1所述的下颌运动轨迹测量方法， 其特征在于： 所述在所述右侧二维面 部图像、 所述左侧 二维面部图像以及所述中间二维面部图像的下颌处均添加若干目标点、 在所述中间二维面部图像的鼻部或者 额头处添加若干参 考点的步骤 包括： 采集位于红外波段处的右侧二维面部图像、 左侧二维面部图像以及中间二维面部图 像； 在所述右侧二维面部图像、 所述左侧二维面部图像以及所述中间二维面部图像的下颌 处均定位出 所述目标点； 基于深度神经网络提取 出所述目标点。 3.根据权利要求1所述的下颌运动轨迹测量方法， 其特征在于： 所述基于第 一预设算法 分别计算出每一所述目标点以及每一所述参考点对应的三维坐标， 并根据所述三 维坐标以 及半全局代价聚类算法生成与所述右侧、 中间以及左侧 二维面部图像对应的右侧、 中间以 及左侧三维面部模型的步骤 包括： 根据所述相机标定的输出参数以及三角法分别计算出每一所述目标点对应的所述三 维坐标； 以所述三维坐标作为约束条件 并基于所述半全局 代价聚类算法生成与 所述右侧、 中间 以及左侧二维面部图像对应的所述右侧、 中间以及左侧三维面部模型。 4.根据权利要求1所述的下颌运动轨迹测量方法， 其特征在于： 所述基于第 二预设算法 将所述右侧三维面部模型、 所述中间三 维面部模型以及所述左侧三 维面部模型拼接为完整 三维面部模型， 并将所述完整三维面部模型与所述相 机采集到的纹理图像进行融合， 以生 成彩色三维面部模型的步骤 包括： 基于所述相机的标定参数完成所述右侧三维面部模型、 所述中间三维面部模型以及所 述左侧三维面部模型的粗 拼接， 以生成初步 三维面部模型； 通过迭代最近点算法对所述初步三维面部模型进行优化， 以生成所述完整三维面部模 型； 通过纹理映射将所述相机采集到的纹 理图像贴合在所述完整三维面部模型 上。 5.根据权利 要求1所述的下颌运动轨迹测量方法， 其特征在于： 所述相机包括RGB ‑IR图 像传感器， 且所述相机配置有对应的白光和近红外补光 光源。权　利　要　求　书 1/2 页 2 CN 114862782 A 26.一种下颌运动轨 迹测量系统， 其特 征在于， 所述系统包括： 采集模块， 用于通过至少三组相机分别对应采集测量目标的右侧、 中间以及左侧二维 面部图像， 并在所述右侧 二维面部图像、 所述左侧 二维面部图像以及所述中间二维面部图 像的下颌处均添加若干目标点， 且在所述中间二 维面部图像的鼻部或者额头处添加若干参 考点； 第一计算模块， 用于基于第 一预设算法分别计算出每一所述目标点以及每一所述参考 点对应的三维坐标， 并根据所述三维坐标以及半全局代价聚类算法生成与所述右侧、 中间 以及左侧二维面部图像对应的右侧、 中间以及左侧三维面部模型； 第二计算模块， 用于基于第二预设算法将所述右侧三维面部模型、 所述中间三维面部 模型以及所述左侧三 维面部模型拼接为完整三维面部模型， 并将所述完整三 维面部模型与 所述相机采集到的纹 理图像进行融合， 以生成彩色三维面部模型； 第三计算模块， 用于以若干所述参考点的中心为原点， 并基于第三预设算法在所述彩 色三维面部模型中分别计算出每一所述目标点对应的运动轨 迹。 7.根据权利要求6所述的下颌运动轨迹测量系统， 其特征在于： 所述采集模块具体用 于： 采集位于红外波段处的右侧二维面部图像、 左侧二维面部图像以及中间二维面部图 像； 在所述右侧二维面部图像、 所述左侧二维面部图像以及所述中间二维面部图像的下颌 处均定位出 所述目标点； 基于深度神经网络提取 出所述目标点。 8.根据权利要求6所述的下颌运动轨迹测量系统， 其特征在于： 所述第 一计算模块具体 用于： 根据所述相机标定的输出参数以及三角法分别计算出每一所述目标点对应的所述三 维坐标； 以所述三维坐标作为约束条件 并基于所述半全局 代价聚类算法生成与 所述右侧、 中间 以及左侧二维面部图像对应的所述右侧、 中间以及左侧三维面部模型。 9.一种计算机， 包括存储器、 处理器以及存储在所述存储器上并可在所述处理器上运 行的计算机程序， 其特征在于， 所述处理器执行所述计算机程序时实现如权利要求1至5中 任意一项所述的下颌运动轨 迹测量方法。 10.一种可读存储介质， 其上存储有计算机程序， 其特征在于， 该程序被处理器执行时 实现如权利要求1至 5中任意一项所述的下颌运动轨 迹测量方法。权　利　要　求　书 2/2 页 3 CN 114862782 A 3