一种基于增强现实的超声辅助扫查系统及方法.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN111544035A(43)申请公布日2020.08.18(21)申请号202010398346.7(22)申请日2020.05.12(71)申请人上海深至信息科技有限公司地址200241上海市闵行区东川路555号戊楼5层5030室申请人上海尽星生物科技有限责任公司(72)发明人朱瑞星赵靖刘西耀(74)专利代理机构上海申新律师事务所31272代理人俞涤炯(51)Int.Cl.A61B8/00(2006.01)权利要求书3页说明书7页附图3页(54)发明名称一种基于增强现实的超声辅助扫查系统及方法(57)摘要本发明提供一种基于增强现实的超声辅助扫查系统及方法，涉及超声辅助扫查技术领域，包括：双目视觉设备，拍摄第一图像和第二图像；数据处理模块，根据第一图像和第二图像处理得到实时人体轮廓，提取与实时人体轮廓具有最高相似度的标准人体轮廓；计算实时人体轮廓相对于标准人体轮廓的缩放比例矩阵，并根据缩放比例矩阵对标准脏器位置轮廓进行缩放得到实时脏器位置轮廓；对实时脏器位置轮廓进行扭曲矩阵运算得到成像数据；根据投影设备的技术参数和双目视觉设备和投影设备之间的视差，以及双目视觉设备的景深数据处理得到投影参数；投影设备根据投影参数将成像数据投影到待扫查部位。有益效果是能够准确定位到超声扫查的感兴趣区域。CN111544035ACN111544035A权利要求书1/3页1.一种基于增强现实的超声辅助扫查系统，其特征在于，具体包括：双目视觉设备，所述双目视觉设备包括至少两个摄像头，并放置于超声检查区域的上方，用于在超声扫查时，采用至少两个所述摄像头分别跟踪拍摄得到包含待检查人员的第一图像和第二图像并输出；数据处理模块，分别连接所述双目视觉设备和一投影设备，所述数据处理模块具体包括：数据存储单元，用于保存预先生成的对应于不同体型的标准人体轮廓，每个所述标准人体轮廓关联有若干标准脏器位置轮廓，每个所述标准脏器位置轮廓对应有一标准位置矩阵；第一处理单元，连接所述数据存储单元，用于根据所述第一图像和所述第二图像处理得到所述待检查人员的实时人体轮廓，并分别计算所述实时人体轮廓与各所述标准人体轮廓之间的相似度，提取与所述实时人体轮廓具有最高的所述相似度的所述标准人体轮廓并输出；比例缩放单元，分别连接所述数据存储单元和所述第一处理单元，用于计算所述实时人体轮廓相对于所述标准人体轮廓的缩放比例矩阵，并根据所述缩放比例矩阵对待扫查部位对应的所述标准脏器位置轮廓进行缩放得到实时脏器位置轮廓；第二处理单元，分别连接所述数据存储单元和所述比例缩放单元，用于根据所述标准位置矩阵对所述实时脏器位置轮廓进行扭曲矩阵运算得到所述待检查部位的成像数据；第三处理单元，连接所述第二处理单元，用于根据预先获取的所述投影设备的技术参数、所述双目视觉设备与所述投影设备之间的视差以及预先处理得到的所述双目视觉设备的景深数据，处理得到所述投影设备的关联于预设投影标准的投影参数，并将所述投影参数和所述成像数据发送至所述投影设备；所述投影设备根据所述投影参数将所述成像数据投影到所述待检查人员的所述待扫查部位，医生根据表征所述待扫查部位的所在位置的所述成像数据进行超声扫查。2.根据权利要求1所述的基于增强现实的超声辅助扫查系统，其特征在于，所述双目设备通过一固定夹具放置于所述投影设备上。3.根据权利要求1所述的基于增强现实的超声辅助扫查系统，其特征在于，所述第一处理单元包括：图像融合子单元，用于将所述第一图像和所述第二图像进行图像融合处理得到一融合图像；边缘检测子单元，连接所述图像处理子单元，用于采用对所述融合图像进行边缘检测得到所述待检查人员的所述实时人体轮廓；轮廓提取子单元，连接所述边缘检测子单元，用于分别处理得到所述实时人体轮廓与各所述标准人体轮廓之间的相似度，提取并输出与所述实时人体轮廓具有最高的所述相似度的所述标准人体轮廓。4.根据权利要求1所述的基于增强现实的超声辅助扫查系统，其特征在于，所述第二处理单元包括：第一处理子单元，用于根据所述第一图像和所述第二图像处理得到所述实时脏器位置轮廓相对于预设的标准位置的当前扭曲矩阵；2CN111544035A权利要求书2/3页第二处理子单元，连接所述第一处理子单元，用于将所述当前扭曲矩阵与对应的所述标准位置矩阵进行乘法运算，得到所述待检查部位的成像数据。5.根据权利要求4所述的基于增强现实的超声辅助扫查系统，其特征在于，所述第二处理单元还包括一第三处理子单元，连接所述第二处理子单元，用于对所述成像数据进行二值化处理得到二值化成像数据；则所述第三处理单元中的所述成像数据为经过二值化处理后得到的所述二值化成像数据。6.根据权利要求1所述的基于增强现实的超声辅助扫查系统，其特征在于