申请/专利权人：华南理工大学;华南理工大学珠海现代产业创新研究院

申请日：2021-03-30

公开（公告）日：2022-09-23

公开（公告）号：CN113012230B

主分类号：G06T7/73

分类号：G06T7/73;G06T7/33;G06T7/11;G06T7/136

优先权：

专利状态码：有效-授权

法律状态：2022.09.23#授权;2021.07.09#实质审查的生效;2021.06.22#公开

摘要：本发明公开了一种术中AR辅助引导手术导板安放的方法，包括：1获取四对3D‑2D匹配点对；2求解PNP问题进行三维姿态估计，实现实际手术部位目标模型与虚拟手术部位目标模型的初配准；3在原有Powell算法上，改进其每一轮的搜索方向，确保各个搜索方向始终线性无关，并将初配准结果作为搜索的起始点,得到实现精配准的虚拟三维手术部位模型的位姿调整矩阵；4将位姿调整矩阵作用于虚拟三维手术导板模型，并将其与实际手术部位目标模型的匹配作为指导实际手术导板安放的金标准；5提取视频帧中放置的实际手术导板，并与金标准中的虚拟手术导板做匹配度计算，得到最佳的手术导板安放的位置。本发明可达到渲染的虚拟数字模型与视频目标的实际模型精确配准融合。

主权项：1.一种术中AR辅助引导手术导板安放的方法，其特征在于，包括以下步骤：1获取四对3D-2D匹配点对，包括世界坐标系中的虚拟三维手术部位模型的四个三维坐标点以及图像坐标系中的实际场景手术部位目标的四个二维坐标点；2利用3D-2D匹配点对作为输入，求解PNP问题进行三维姿态估计，从而实现实际手术部位目标模型与虚拟手术部位目标模型的初配准；3在原有Powell算法上，改进其每一轮的搜索方向，确保各个搜索方向始终线性无关，并将初配准结果作为搜索的起始点,得到实现精配准的虚拟三维手术部位模型的位姿调整矩阵，包括以下步骤：3.1选取初始点x0＝0,0,0,0,0,0，即将经过求解PNP问题得到的三维姿态估计的结果作为初始状态，在此基础上进行精配准；3.2选取6个线性无关的搜索方向d1,1,d1,2...d1,6，并给定允许误差Err，设置初始迭代次数k＝1，且将参考图像与浮动图像的二值图像素差绝对值和误差作为匹配度量函数fx，fx如下式所示： 式中，m和n分别是视频帧图像的高度和宽度；为视频场景中手术部位目标模型的二值图中对应的二值像素值；为变换后的手术部位虚拟模型的二值图像中对应的二值像素值；3.3设置第k轮搜索的起始点xk,0＝xk-1，并从xk,0出发，依次沿着第k轮的dk,1,dk,2...dk,6这6个方向进行搜索，使用一维的黄金分割算法进行迭代寻优，得到各个搜索方向的极值点为xk,1,xk,2,...xk,6，求使得匹配度量函数值下降最大的方向，即求max{fxk,r-1-fxk,r},r＝1,2...6，r表示方向组中第r个方向，然后令一个新的搜索方向dk,6+1＝xk,6-xk,0，若||xk,6-xk,0||≤Err，则停止搜索计算，跳转步骤3.6；否则，进行步骤3.4；3.4求解搜索方向组线性无关的条件指标λ，即求min{fxk,0+λdk,6+1}，得出条件指标λ值，然后令第k+1轮的搜索起始点xk+1,0＝xk＝xk,0+λdk,6+1，若||xk-xk-1||≤Err，则停止迭代计算，跳转步骤3.6，得到结果点xk，否则，进行步骤3.5；3.5若新的搜索方向dk,6+1与原搜索方向组线性无关，则更新搜索方向组，即令dk+1,j＝dk,j,j＝1,..r-1；dk+1,j＝dk,j+1,j＝r...6，并更新迭代次数k＝k+1,跳转到步骤3.3；否则，不更新搜索方向组，即令dk+1,j＝dk,j,j＝1,2...6,置k＝k+1，跳转步骤3.3；3.6根据搜索的结果，并作用于虚拟三维手术部位模型完成误差调整，最终得到实际手术部位目标模型与虚拟手术部位目标模型的精确配准融合；4将位姿调整矩阵作用于虚拟三维手术导板模型，并将其与实际手术部位目标模型的匹配作为指导实际手术导板安放的金标准；5提取视频帧中放置的实际手术导板，并与金标准中的虚拟手术导板做匹配度计算，根据实际导板放置的不同位置得到不同的匹配度值，计算匹配度中最大值，得到最佳的手术导板安放的位置。

全文数据：

权利要求：

百度查询： 华南理工大学;华南理工大学珠海现代产业创新研究院 一种术中AR辅助引导手术导板安放的方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD