夜间作战辅助作业中HoloLens2跟踪注册性能提升研究 被引量：1

1

作者 高虹霓 牛程弘 +4 位作者 刘海平 王崴 陈同 瞿珏 李承宇 《兵器装备工程学报》 CAS CSCD 北大核心 2023年第6期56-64,共9页

针对夜间作战辅助作业的迫切需求和HoloLens2在夜间低光照环境中跟踪注册功能失效的现实,并且现有的增强低光照环境下跟踪注册方法没有特别针对HoloLens2开发也并不是真正的夜间低光照环境,提出了使用荧光纹理恢复HoloLens2夜间跟踪注... 针对夜间作战辅助作业的迫切需求和HoloLens2在夜间低光照环境中跟踪注册功能失效的现实,并且现有的增强低光照环境下跟踪注册方法没有特别针对HoloLens2开发也并不是真正的夜间低光照环境,提出了使用荧光纹理恢复HoloLens2夜间跟踪注册功能的方法,用于辅助夜战中的辅助作业。首先通过分析HoloLens2的跟踪注册原理,确定了能对HoloLens2跟踪注册产生影响的关键特征为角点;其次测试了HoloLens2在夜间低光照下的跟踪注册性能,确定了HoloLens2能够稳定跟踪注册的最低环境光照度为0.4 Lux;最后设计了不同的纹理,对比了纹理对称性、纹理锐度、轮廓的有无、标记的宽度、特征数量的密度等5种因素对于恢复HoloLens2夜间跟踪注册功能的影响效果,通过分析实验结果,总结出纹理的5条设计原则或建议,用于指导后续的低照度环境项目开发,分别为:不区分对称性;清晰的边缘;拥有包络轮廓;标记像素宽度为10能获得较好的效果;标记宽度相同的前提下,应有尽量多的特征角点。 展开更多

关键词 hololens2 低照度环境 跟踪注册 荧光纹理 设计原则

在线阅读 下载PDF 职称材料

基于HoloLens2的DEM空间分析实验教学混合现实环境研究 被引量：16

2

作者 吕秀琴 张生海 《实验技术与管理》 CAS 北大核心 2021年第10期124-129,共6页

为提高DEM空间分析的教学效果,跨越地形实体和DEM空间数据之间的认知差异,提升对空间分析和可视化方法的理解深度,利用混合现实技术自然的交互方式以及对于3D模型良好的可视化功能,将DEM空间分析的实验教学内容融入混合现实交互环境,设... 为提高DEM空间分析的教学效果,跨越地形实体和DEM空间数据之间的认知差异,提升对空间分析和可视化方法的理解深度,利用混合现实技术自然的交互方式以及对于3D模型良好的可视化功能,将DEM空间分析的实验教学内容融入混合现实交互环境,设计了混合现实实验环境,其中包括DEM模型、虚拟面板、手势交互、剖面分析、通视分析、光照分析等空间分析功能。在HoloLens2真机上利用其环境感知、全息显示和交互接口进行实验验证,实现了实验教学内容的视听同步和实时沉浸。 展开更多

关键词 数字高程模型 空间分析 混合现实环境 hololens2 实验教学

在线阅读 下载PDF 职称材料

基于HoloLens2的混合现实技术在医学影像专业教学中的应用探究 被引量：3

3

作者 韩青林 孙栋淋 +7 位作者 辛昊杰 李祥林 许昌 王帅 刘岩 张薇 董艺 王全胤 《中国医药科学》 2024年第19期65-68,共4页

混合现实(MR)技术是一门基于计算机图形学、人工智能、传感技术和人机交互技术等多种学科的综合性技术,该技术将虚拟图像与现实世界相叠加,扩充现实世界,加深用户对于现实世界的认知,便于用户更加形象具体的理解现实世界,MR的应用对医... 混合现实(MR)技术是一门基于计算机图形学、人工智能、传感技术和人机交互技术等多种学科的综合性技术,该技术将虚拟图像与现实世界相叠加,扩充现实世界,加深用户对于现实世界的认知,便于用户更加形象具体的理解现实世界,MR的应用对医学影像专业教学产生深远影响。本文剖析MR的概念并简述其发展历程,针对医学影像专业教学中存在的问题进行分析阐述,结合微软产品HoloLens2的特点,探究MR在医学影像专业教学中存在问题的解决方案,介绍其在实际教学中取得的成效并展望未来发展趋势。 展开更多

关键词 hololens2 混合现实技术 医学影像 教学研究

在线阅读 下载PDF 职称材料

基于HoloLens2的目标检测技术研究 被引量：4

4

作者 曾笑 《现代计算机》 2021年第14期92-95,共4页

利用深度学习的目标检测技术与混合现实结合的方法,旨在帮助穿戴Microsoft HoloLens2设备的用户对真实世界的物体对象进行实时高效的检测,得到物体对象的位置,还能够识别目标,得到目标的分类信息及其所属类别的置信度。同时,利用HoloLe... 利用深度学习的目标检测技术与混合现实结合的方法,旨在帮助穿戴Microsoft HoloLens2设备的用户对真实世界的物体对象进行实时高效的检测,得到物体对象的位置,还能够识别目标,得到目标的分类信息及其所属类别的置信度。同时,利用HoloLens2的增强现实信息能够更加直观地看到检测信息,摆脱传统的人机交互方式,达到虚实交互的目的。实验结果表明,该系统能够较快地计算目标检测信息,具有较高的识别准确率。 展开更多

关键词 目标检测 Microsoft hololens2 混合现实 深度学习

在线阅读 下载PDF 职称材料

基于HoloLens2的天然气场站数字孪生系统 被引量：2

5

作者 何国军 詹佳琪 +1 位作者 李子欣 冉云龙 《信息与电脑》 2023年第24期103-107,共5页

针对能源行业发展过程中面临的健康安全和环境风险问题,以及场站数据展示形式的有限性,设计并实现基于HoloLens2的天然气场站数字孪生系统。HoloLens2头戴式设备采用先进混合现实技术,因其灵活性及支持虚拟模型交互等功能被用于用户界... 针对能源行业发展过程中面临的健康安全和环境风险问题,以及场站数据展示形式的有限性,设计并实现基于HoloLens2的天然气场站数字孪生系统。HoloLens2头戴式设备采用先进混合现实技术,因其灵活性及支持虚拟模型交互等功能被用于用户界面的设计。系统运用模型库技术,对现场设备进行高精度建模与分类。通过数据管理模块存储传输生产区和控制系统的实时数据,并对机密数据增加访问权限以保证安全性。采用分布式流媒体渲染技术实现并行计算传输视频流,解决HoloLens2性能受限的问题。 展开更多

关键词 hololens2 天然气 数字孪生 分布式流式渲染技术

在线阅读 下载PDF 职称材料

基于混合现实技术的中压微网发电示教系统研究

6

作者 张康 张盛梅 +2 位作者 赵阅群 李相辉 毛乃强 《农村电气化》 2025年第9期73-79,共7页

为了解决中压微网发电作业存在的培训成本高、训练受时间空间限制、培训过程中故障特征难以复现、突发应急作业过程中容易出现操作失误影响抢修进度等问题,研究设计了一种基于混合现实技术的中压微网发电示教系统。该系统基于全息头显Ho... 为了解决中压微网发电作业存在的培训成本高、训练受时间空间限制、培训过程中故障特征难以复现、突发应急作业过程中容易出现操作失误影响抢修进度等问题,研究设计了一种基于混合现实技术的中压微网发电示教系统。该系统基于全息头显HoloLens2设备,通过建立中压发电车虚拟模型,使用Unity3D平台搭建混合现实开发环境,研究设计了微网发电设备识别及原理示教、基于YOLOX-Tiny算法的发电车开关状态检测、微网发电作业虚拟训练、现场发电作业操作引导、知识图谱及专家远程协助等功能。以国网烟台供电公司带电作业中心为背景,对系统进行了综合应用测试,应用结果表明,该系统有效解决了现有中压微网发电存在的问题,提升了作业效率及作业安全,并具有良好的人机交互性。 展开更多

关键词 中压微网发电 混合现实技术 hololens2 YOLOX-Tiny

在线阅读 下载PDF 职称材料

工业机器人教学实训平台的AR可视化应用设计 被引量：9

7

作者 李晋芳 苏键聪 +2 位作者 肖立宝 何汉武 李振贤 《实验技术与管理》 CAS 北大核心 2024年第4期118-124,共7页

工业机器人教学实训平台运行机理较为复杂抽象,学生无法在有限的实训时间内完全理解平台整体运行机理,难以安全高效地完成实训任务。针对上述问题,提出以多层次架构设计实训平台AR可视化应用,在Unity3D中实现原型系统开发。通过KEPServe... 工业机器人教学实训平台运行机理较为复杂抽象,学生无法在有限的实训时间内完全理解平台整体运行机理,难以安全高效地完成实训任务。针对上述问题,提出以多层次架构设计实训平台AR可视化应用,在Unity3D中实现原型系统开发。通过KEPServerEX获取多源设备数据,以标志物注册配合空间锚点技术实现平台模型的跟踪注册。在Holo Lens2设备上将平台结构信息、运行状态以及操作指引等内容实现AR可视化,学生可通过手势、视点等多元手段获悉平台状态与实训指引。实践表明,工业机器人教学实训平台AR可视化应用能帮助学生把控平台运行状态,安全高效地完成实训任务。 展开更多

关键词 实训平台 增强现实 可视化 hololens2 多源数据

在线阅读 下载PDF 职称材料

基于混合现实的航空发动机辅助维修学习系统

8

作者 何振鹏 赵福星 +4 位作者 辛佳 黎柏春 葛畅 刘鸿宇 刘泉 《中国民航大学学报》 2025年第4期43-49,共7页

针对航空发动机维修中存在的问题,结合三维注册融合、手势识别交互、空间映射网络和远程指导标注等关键技术,本文提出一种基于混合现实的航空发动机辅助维修学习系统。研究实现了航空发动机维修结构学习、航空发动机诱导维修、远程空间... 针对航空发动机维修中存在的问题,结合三维注册融合、手势识别交互、空间映射网络和远程指导标注等关键技术,本文提出一种基于混合现实的航空发动机辅助维修学习系统。研究实现了航空发动机维修结构学习、航空发动机诱导维修、远程空间指导标注等模块功能,并通过航空发动机故障案例验证了系统各功能模块的可行性与有效性。结果表明:该系统具有高效交互性,可大幅降低维修任务工作难度,提升维修培训与学习实践效率。 展开更多

关键词 混合现实 航空发动机 手势交互 装配维修 HoloLens 2

在线阅读 下载PDF 职称材料

基于混合现实的自行火炮维修指导系统 被引量：4

9

作者 朱金达 赵永衡 《兵器装备工程学报》 CAS CSCD 北大核心 2023年第4期45-52,共8页

针对自行火炮现场维修过程中存在的维修知识获取不直观、维修操作不当易造成二次损伤、专家亲临指导不及时等难题,设计了一种基于混合现实技术的自行火炮维修指导系统。分析建立了系统实现的整体框架、运行机制,研究了虚实坐标同一化表... 针对自行火炮现场维修过程中存在的维修知识获取不直观、维修操作不当易造成二次损伤、专家亲临指导不及时等难题,设计了一种基于混合现实技术的自行火炮维修指导系统。分析建立了系统实现的整体框架、运行机制,研究了虚实坐标同一化表达、三维注册融合、环境感知运动追踪和虚实遮挡处理等关键技术,实现了虚实维修空间的几何一致性。最后通过设计搭建的自行火炮混合现实辅助维修指导系统,结合传动装置齿轮箱故障维修实例验证了系统空间锚定、辅助维修、远程指导等关键功能技术可行性,实现了现场维修的实时指导,提升了维修效率。 展开更多

关键词 维修指导 自行火炮 混合现实 hololens2 空间锚点

在线阅读 下载PDF 职称材料

遥感卫星成像的HoloLen2混合现实教学设计与实践 被引量：3

10

作者 张毅 《测绘工程》 2023年第6期76-80,共5页

针对遥感卫星成像教学内容的特点,以及现有教学手段的不足,基于微软HoloLens2头戴式MR设备,将遥感卫星轨道和成像原理等课程知识点融入到混合现实环境中。设计了遥感卫星成像教学内容,混合现实环境开发,以及MR课堂教学实践。在混合现实... 针对遥感卫星成像教学内容的特点,以及现有教学手段的不足,基于微软HoloLens2头戴式MR设备,将遥感卫星轨道和成像原理等课程知识点融入到混合现实环境中。设计了遥感卫星成像教学内容,混合现实环境开发,以及MR课堂教学实践。在混合现实技术的支持下,遥感课程教学强化了遥感卫星成像的重难点知识,HoloLens2混合现实技术在实际的教学过程中得到学生的认可,有效地提高了遥感卫星成像的教学效果。 展开更多

关键词 遥感原理与应用 遥感卫星成像 混合现实 hololens2 教学设计

在线阅读 下载PDF 职称材料

快速性心律失常消融手术的增强现实导航系统 被引量：1

11

作者 王博 谷雪莲 +1 位作者 孙毅勇 周天鹏 《软件导刊》 2022年第8期86-94,共9页

为了提高传统快速性心律失常消融手术成功率、缩短手术时间以及加强临床培训,设计一种新型的数据传输方案和三维跟踪方案,利用HoloLens2、MRTK API、ZeroMQ以及磁定位和Vuforia的混合跟踪技术,开发快速性心律失常消融手术的增强现实导... 为了提高传统快速性心律失常消融手术成功率、缩短手术时间以及加强临床培训,设计一种新型的数据传输方案和三维跟踪方案,利用HoloLens2、MRTK API、ZeroMQ以及磁定位和Vuforia的混合跟踪技术,开发快速性心律失常消融手术的增强现实导航系统。模型显示效果测试、数据传输性能测试以及三维跟踪注册精度测试实验证明了该手术导航系统的可用性,通过模型显示帧率、数据传输延迟率和丢包率以及三维跟踪注册误差值等指标进行评估。实验结果表明,当模型的三角面数量小于15k时,模型的显示帧率主要分布在50~60FPS,占总比例的78%,且实时传输数据可以保证数据不丢失且整体延迟低于1ms。在保证手术效果和安全的情况下,尽可能减小各因素影响(识别图位置、识别图大小、观察角度、观察距离和导管移动速度),确定最佳实践方案,最小误差为1.17mm。 展开更多

关键词 增强现实 快速性心律失常 电生理手术导航系统 hololens2 数据传输 混合跟踪注册

在线阅读 下载PDF 职称材料

基于MR技术的计算机组装系统设计与实现 被引量：3

12

作者 李广松 张佳林 官泽良 《现代信息科技》 2024年第2期108-113,共6页

使用HoloLens2头盔和混合现实插件Mixed Reality Feature Tool开发出一款计算机组装混合现实交互应用。通过HoloLens2凝视、手部跟踪、UX构建基块、语音和听写系统、眼部跟踪等进行输入交互,并配合Unity3D中的Animation系统与UGUI系统,... 使用HoloLens2头盔和混合现实插件Mixed Reality Feature Tool开发出一款计算机组装混合现实交互应用。通过HoloLens2凝视、手部跟踪、UX构建基块、语音和听写系统、眼部跟踪等进行输入交互,并配合Unity3D中的Animation系统与UGUI系统,最终实现混合现实虚拟交互。Unity3D工程导出UWP,并生成VS工程,然后部署到HoloLens2中进行测试。测试结果表明,该系统实现了计算机组装的相关交互功能。研究为计算机组装的虚拟操作提供了一种混合现实解决方案。 展开更多

关键词 hololens2 混合现实 Unity 3D 计算机组装

在线阅读 下载PDF 职称材料

混合现实(MR)技术赋能传统文化的创新实践研究 被引量：1

13

作者 胡小强 唐武 《现代计算机》 2024年第19期70-73,共4页

中医药文化是中华民族的瑰宝,是中国优秀传统文化的重要组成部分。为弘扬优秀传统文化,基于Unity3D开发引擎,采用Microsoft公司HoloLens2设计并实现了一款混合现实(MR)的中医药制剂教学辅助系统。该系统通过构建虚拟模拟环境和人机交互... 中医药文化是中华民族的瑰宝,是中国优秀传统文化的重要组成部分。为弘扬优秀传统文化,基于Unity3D开发引擎,采用Microsoft公司HoloLens2设计并实现了一款混合现实(MR)的中医药制剂教学辅助系统。该系统通过构建虚拟模拟环境和人机交互功能,可以使用户身临其境地感受中药的采集、处理、配方制作等过程。在中医制剂流程的基础上,搭建融合STEAM教育理念的教育游戏,设计出系统功能模块,提出系统开发环境、开发技术路线。实验研究表明,该系统能够极大激发用户的学习乐趣,提高在体验过程中获取知识的主动性,有利于中医药传统文化的传承和文化知识的传播,是展示和传播中医药文化的一种创新形式,为后续研究提供了参考。 展开更多

关键词 混合现实技术 传统文化 hololens2 中医药文化 MR教育应用 教育游戏

在线阅读 下载PDF 职称材料

基于混合现实的安全应急实训平台开发与应用 被引量：1

14

作者 徐俊 祝恒恒 《信息与电脑》 2023年第10期134-136,共3页

安全应急实训课程基于虚拟现实的实训系统存在场景复现不真、虚实融合不深,缺少相关真实场景火灾发展的规律演变等问题。基于此,对相关场景进行数字建模,结合化工车间火灾场景模拟计算推演,提出了基于Bim-Pyrosim-Unity 3D的混合现实开... 安全应急实训课程基于虚拟现实的实训系统存在场景复现不真、虚实融合不深,缺少相关真实场景火灾发展的规律演变等问题。基于此,对相关场景进行数字建模,结合化工车间火灾场景模拟计算推演,提出了基于Bim-Pyrosim-Unity 3D的混合现实开发技术,创建了混合现实应急实训平台,在HoloLens2上进行部署实验,取得了较好效果。 展开更多

关键词 Bim-Pyrosim-Unity3D hololens2 三维注册 火灾时空场景 学习效果评价

在线阅读 下载PDF 职称材料

增强现实注册方法在胶质瘤手术中的应用评估 被引量：1

15

作者 王佳瑜 王殊轶 +3 位作者 卫永旭 尚寒冰 王雪 康宁 《软件导刊》 2024年第7期195-201,共7页

在胶质瘤切除手术中,医生不可避免地需要频繁移动或转动头部来观察手术区域。为评估基于增强现实技术的导航系统在胶质瘤手术中的定位精度,提出基于多个图像目标的三维注册方法。测试者佩戴HoloLens2,将其3D虚拟模型叠加在真实的头部模... 在胶质瘤切除手术中,医生不可避免地需要频繁移动或转动头部来观察手术区域。为评估基于增强现实技术的导航系统在胶质瘤手术中的定位精度,提出基于多个图像目标的三维注册方法。测试者佩戴HoloLens2,将其3D虚拟模型叠加在真实的头部模型上,从不同观测角度分别测量头皮和胶质瘤上基准标记点的虚实空间坐标。将所提方法与传统的基于交互式无标识的注册方法进行比较,分析两种方法在不同观测角度下对定位精度的影响。结果表明,基于多个图像目标注册方法的头皮平均定位误差、胶质瘤平均定位误差分别为(2.20±0.59)mm、(2.10±0.72)mm;基于交互式无标识注册方法的头皮平均定位误差、胶质瘤平均定位误差分别为(4.52±1.77)mm、(4.43±1.69) mm,前者定位精度更高。基于多个图像目标的三维注册方法可为增强现实系统应用于神经肿瘤学提供参考。 展开更多

关键词 增强现实 胶质瘤 三维注册 hololens2 定位误差

在线阅读 下载PDF 职称材料

疫情背景下MR旅游项目发展的思考 被引量：2

16

作者 汪洋 《企业科技与发展》 2020年第4期237-238,共2页

疫情期间,人们虽然停住了自己的脚步,但心却依然渴望着远方。文章基于社会实际需求所带来的行业发展机遇,对介导现实MR技术在旅游行业中的应用进行论证,从MR技术的发展、MR技术在旅游产业中的应用、MR技术对传统旅游模式的影响等方面对... 疫情期间,人们虽然停住了自己的脚步,但心却依然渴望着远方。文章基于社会实际需求所带来的行业发展机遇,对介导现实MR技术在旅游行业中的应用进行论证,从MR技术的发展、MR技术在旅游产业中的应用、MR技术对传统旅游模式的影响等方面对依靠MR技术发展的旅游项目做出分析,以期对未来我国旅游行业的转型提出一些思考。 展开更多

关键词 VR MR hololens2 未来趋势 场景搭建

在线阅读 下载PDF 职称材料

AR引导放疗摆位关键技术的应用评估

17

作者 付小妮 王殊轶 +4 位作者 胡忞仁 杨双燕 梁巨宏 吴张檑 于佳琪 《生物医学工程研究》 2022年第3期285-292,共8页

为实现患者无体表物理标记、还原患者定位时的姿态,本研究开发了适用于HoloLens2的AR引导放疗摆位系统,研究了AR系统中的三维配准原理;并对识别图尺寸大小对三维注册误差的影响做了对比测试。利用前指针和激光测距仪测量以识别图为原点... 为实现患者无体表物理标记、还原患者定位时的姿态,本研究开发了适用于HoloLens2的AR引导放疗摆位系统,研究了AR系统中的三维配准原理;并对识别图尺寸大小对三维注册误差的影响做了对比测试。利用前指针和激光测距仪测量以识别图为原点的加速器等中心的坐标,使用肺部模体进行测试,以测试时间和主观问卷量表作为评价指标。8 cm×8 cm识别图的三维注册误差最小,为(4.45±0.23)mm;传统摆位花费的时间为(2.10±0.12)min,而AR引导放疗摆位花费的时间为(2.34±0.43)min(P<0.05)。AR引导放疗摆位在易学性、系统复杂度、全息投影清晰度三个方面的评分优于传统放疗摆位。 展开更多

关键词 增强现实 三维注册 等中心 放疗摆位 hololens2 注册误差

在线阅读 下载PDF 职称材料

增强现实技术在安检设备展示上的应用研究

18

作者 刘溢溥 李蒙 《机电产品开发与创新》 2020年第6期48-50,共3页

增强现实技术为产品展示提供了一条全新的途径,带给观看者更好的视觉效果。本文以安检设备的展示为目标,完成了实现增强现实软件和硬件两个方面的需求分析和选择。通过使用PTC公司Creo和Vuforia Studio软件及微软公司的HoloLens2眼镜实... 增强现实技术为产品展示提供了一条全新的途径,带给观看者更好的视觉效果。本文以安检设备的展示为目标,完成了实现增强现实软件和硬件两个方面的需求分析和选择。通过使用PTC公司Creo和Vuforia Studio软件及微软公司的HoloLens2眼镜实现了安检设备增强现实展示的研究与应用。 展开更多

关键词 增强现实 安检设备展示 Creo Vuforia Studio hololens2

在线阅读 下载PDF 职称材料

基于HoloLens的江豚科普系统设计与研究

19

作者 陈晓慧 陶健林 +2 位作者 赵宇 方骥 王广军 《科教文汇》 2024年第11期I0006-I0008,共3页

长江江豚科普教育是长江江豚保护的重要内容,本研究聚焦长江江豚的科普教育,采用HoloLens混合现实技术,设计并构建了一套长江江豚科普系统。系统由三大核心模块构成:江豚知识科普、江豚结构科普、江豚主题游戏。系统综合运用了三维建模... 长江江豚科普教育是长江江豚保护的重要内容,本研究聚焦长江江豚的科普教育,采用HoloLens混合现实技术,设计并构建了一套长江江豚科普系统。系统由三大核心模块构成:江豚知识科普、江豚结构科普、江豚主题游戏。系统综合运用了三维建模、Unity 3D交互技术和混合现实技术,打造了一个既具有高度互动性又充满沉浸感的江豚科普教育平台。以HoloLens 2作为主要展示工具,本系统成功实现了一种混合现实的交互体验。对20名大学生的使用情况的分析结果表明:基于混合现实技术的科普方法能显著提升学习效果,且具有较高的用户体验评价。 展开更多

关键词 长江江豚 混合现实 HoloLens 2 科普展示

在线阅读 下载PDF 职称材料

基于AR技术的冠心病宣教系统设计

20

作者 阳盼 陈样新 +4 位作者 李晋芳 邹嘉 苏键聪 田厚亮 金小岩 《广东工业大学学报》 2026年第1期49-60,共12页

冠心病作为一种复杂的多因素疾病,其病理机制具有高度抽象性和专业性,这对患者健康教育是一个挑战。传统健康教育模式主要依赖健康手册、宣传视频等静态媒介,在知识传播效果和患者参与度方面存在明显局限性。为解决上述问题,本文开发了... 冠心病作为一种复杂的多因素疾病,其病理机制具有高度抽象性和专业性,这对患者健康教育是一个挑战。传统健康教育模式主要依赖健康手册、宣传视频等静态媒介,在知识传播效果和患者参与度方面存在明显局限性。为解决上述问题,本文开发了一套基于增强现实(Augmented Reality,AR)技术的冠心病交互式健康教育系统。该系统整合了HoloLens2、Kinect DK及Pico4等多模态硬件设备,构建了HoloLens2-Kinect DK-Pico4多端协同框架,实现医患共享AR视角。医生通过空间叠加患者实时心血管模型进行病情推演,患者借助头显同步观察个性化病理演变过程,强化情境认知。在技术实现层面,本文通过参数化处理个性化教育资源,优化了多媒体内容的视觉呈现;提出了基于空间锚点的深度相机注册保持算法,并结合位姿更新频率优化策略,显著提升了心血管模型的注册稳定性;利用Kinect DK捕获的患者骨骼数据与Unity引擎的Avatar模块进行实时映射,实现了心血管模型实时稳定跟随患者移动的效果;通过Unity3D引擎实现了PC服务端、医生AR端以及患者虚拟现实端的应用构建,通过自定义数据包结构、消息类型以及进程池机制等,实现了HoloLens2-Kinect DK-Pico4之间的顺利通讯。 展开更多

关键词 冠心病 增强现实 健康宣教 视觉呈现 hololens2

在线阅读 下载PDF 职称材料