(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211179636.8 (22)申请日 2022.09.27 (71)申请人 湖南中聚内窥镜有限公司 地址 410205 湖南省长 沙市高新 开发区东 方红街道青山路6号金鹰文化创意园 1、 2、 3号厂房、 4号配套 服务用房303-4 房 (72)发明人 邹清红　韦博仁　梁瑶　陈智勇　 王龙　雷亚康　徐剑秋　金鑫　 邱武　邓小鸿　易路　詹凯　 (74)专利代理 机构 长沙楚为知识产权代理事务 所(普通合伙) 43217 专利代理师 李大为 (51)Int.Cl. G06T 15/00(2011.01)G06T 5/50(2006.01) G06T 17/20(2006.01) G06V 10/25(2022.01) G06V 10/44(2022.01) (54)发明名称 基于内窥成像设备的医疗图像感兴趣区域 渲染方法及装置 (57)摘要 本发明公开了一种基于内窥成像设备的医 疗图像感兴趣区域渲染方法及装置， 其中， 所述 方法包括： 基于三维光学扫描成像 设备获得三维 光学扫描图像； 基于三维超声成像 设备获得三维 超声图像； 依次对三维光学扫描图像和三维超声 图像进行对应的感兴趣区域提取处理， 获得三维 光学扫描图像的第一感兴趣区域和所述三维超 声图像的第二感兴趣区域； 将三维光学扫描图像 的第一感兴趣区域和三维超声图像的第二感兴 趣区域进行图像融合处理， 获得融合三维图像； 将融合三维图像进行坐标系转换处理， 生成具有 感兴趣区域标记的二维图像， 并在显示端上进行 渲染显示。 在本发明具体实施中， 实现在内窥时 对感兴趣区的准确域标记及显示， 有助于对内窥 部位的病变判别准确度。 权利要求书2页 说明书9页 附图1页 CN 115496849 A 2022.12.20 CN 115496849 A 1.一种基于内窥成像设备的医疗图像感兴趣区域渲染方法， 其特征在于， 所述方法包 括： 基于内窥成像设备中的三维光学扫描成像设备获得三维光学扫描图像； 基于内窥成像设备中的三维超声成像设备获得三维超声图像； 依次对所述三维光学扫描图像和所述三维超声图像进行对应的感兴趣区域提取处理， 获得三维光学扫描图像的第一感兴趣区域和所述 三维超声图像的第二感兴趣区域； 将所述三维光学扫描图像的第一感兴趣区域和所述三维超声图像的第二感兴趣区域 进行图像融合处 理， 获得融合 三维图像， 其中所述融合 三维图像中包 含融合感兴趣区域； 将所述融合三维图像进行坐标系转换处理， 生成具有感兴趣区域标记的二维图像， 并 将具有感兴趣区域标记的二维图像在显示端上进行渲染显示。 2.根据权利要求1所述的医疗图像感兴趣区域渲染方法， 其特征在于， 所述基于所述内 窥成像设备中的三维光学扫描成像设备获得三维光学扫描图像， 包括： 基于所述三维光学扫描成像设备将预设图案投影到内窥对象上， 并在所述内窥对象上 形成投影图像； 对所述投影图像进行不同角度的图像数据采集处理， 并基于条纹中心线提取算法对不 同角度采集到的图像数据进行 特征点提取处理， 获得不同角度的提取 特征点数据； 基于不同角度的提取 特征点数据拟合 生成内窥对象的三维光学扫描图像。 3.根据权利要求2所述的医疗图像感兴趣区域渲染方法， 其特征在于， 所述基于不同角 度的提取 特征点数据拟合 生成内窥对象的三维光学扫描图像， 包括： 基于不同角度的提取特征点数据进行内窥对象的三维重建处理， 获得内窥对象的多角 度的三维图像数据； 基于内窥对象的多角度的三维图像数据在所述投影图像中进行拟合处理， 生成内窥对 象的三维光学扫描图像。 4.根据权利要求1所述的医疗图像感兴趣区域渲染方法， 其特征在于， 所述基于所述内 窥成像设备中的三维超声成像设备获得三维超声图像， 包括： 基于所述 三维超声成像设备确定内窥对象对应的每一内窥对象切面； 在每一内窥对象切面被所述三维超声成像设备的超声波照 射后， 生成每一内窥对象切 面的二维超声 波图像； 基于每一内窥对象切面的二维超声波图像进行建模处理， 获得内窥对象的三维超声图 像。 5.根据权利要求1所述的医疗图像感兴趣区域渲染方法， 其特征在于， 所述依次对所述 三维光学扫描图像和所述三 维超声图像进 行对应的感兴趣区域提取处理， 获得三 维光学扫 描图像的第一感兴趣区域和所述 三维超声图像的第二感兴趣区域， 包括： 基于内窥对象的轮廓标记信息对所述三维光学扫描图像进行对应的感兴趣区域提取 处理， 获得三维光学扫描图像的第一感兴趣区域； 基于内窥对象的轮廓标记信 息对所述三维超声图像进行对应的感兴趣区域提取处理， 获得三维超声图像的第二感兴趣区域。 6.根据权利要求5所述的医疗图像感兴趣区域渲染方法， 其特征在于， 所述基于内窥对 象的轮廓标记信息对所述三 维光学扫描图像进行对应的感兴趣区域提取处理， 获得三维光权　利　要　求　书 1/2 页 2 CN 115496849 A 2学扫描图像的第一感兴趣区域， 包括： 基于轮廓提取算法对所述内窥对象在所述三维光学扫描图像中的轮廓进行提取处理， 获得所述内窥对象在所述 三维光学扫描图像中的轮廓标记信息； 利用所述内窥对象在所述三维光学扫描图像中的轮廓标记信息在所述三维光学扫描 图像中进行对应的感兴趣区域 提取处理， 获得三维光学扫描图像的第一感兴趣区域。 7.根据权利要求5所述的医疗图像感兴趣区域渲染方法， 其特征在于， 所述基于内窥对 象的轮廓标记信息对所述三 维超声图像进 行对应的感兴趣区域提取处理， 获得三 维超声图 像的第二感兴趣区域， 包括： 基于轮廓提取算法对所述内窥对象在所述三维超声图像中的轮廓进行提取处理， 获得 所述内窥对象在所述 三维超声图像中的轮廓标记信息； 利用所述内窥对象在所述三维超声图像中的轮廓标记信息在所述三维超声图像中进 行对应的感兴趣区域 提取处理， 获得三维超声图像的第二感兴趣区域。 8.根据权利要求1所述的医疗图像感兴趣区域渲染方法， 其特征在于， 所述将所述融合 三维图像进行坐标系转换处 理， 生成具有感兴趣区域标记的二维图像， 包括： 基于共形映射算法构造所述融合三维图像与二维图像的映射中的三维网格变形能量 函数； 基于所述三维网格变形能量函数将所述融合三维图像在坐标系内进行映射转换处理， 生成具有感兴趣区域标记的二维图像。 9.根据权利要求1所述的医疗图像感兴趣区域渲染方法， 其特征在于， 所述将具有感兴 趣区域标记的二维图像在显示端上进行渲染显示， 包括： 对具有感兴趣区域标记的二维图像进行感兴趣区域使用加窗函数进行加窗处理， 获得 加窗二维图像； 并将所述加窗二维图像在所述显示端上进行渲染显示。 10.一种基于 内窥成像设备的医疗图像感兴趣区域渲染装置， 其特征在于， 所述装置包 括： 获得模块： 用于基于内窥成像设备中的三维光学扫描成像设备获得三维光学扫描图 像； 及， 基于内窥成像设备中的三维超声成像设备获得三维超声图像； 感兴趣区域提取模块： 用于依次对所述三维光学扫描图像和所述三维超声图像进行对 应的感兴趣区域提取 处理， 获得三维光学扫描图像的第一感兴趣区域和所述三维超声图像 的第二感兴趣区域； 图像融合模块： 用于将所述三维光学扫描图像的第 一感兴趣区域和所述三维超声图像 的第二感兴趣区域进行图像融合处理， 获得融合三维 图像， 其中所述融合三维 图像中包含 融合感兴趣区域； 渲染显示模块： 用于将所述融合三维图像进行坐标系转换处理， 生成具有感兴趣区域 标记的二维图像， 并将具有感兴趣区域标记的二维图像在显示端上进行渲染显示。权　利　要　求　书 2/2 页 3 CN 115496849 A 3