KinectV2传感器实时动态手势识别算法

1

作者 刘希东 孟岩 +2 位作者 李国友 唐磊 郭佳栋 《仪器与设备》 2020年第1期8-20,共13页

为解决动态手势动作识别算法提取的特征泛化程度低,识别实时性差和识别率不高的问题,本文提出了一种基于KinectV2传感器的模板匹配手势识别方法。该方法利用Kinect Studio和Visual Gesture Builder建立手势动作数据库,提取人体关键骨骼... 为解决动态手势动作识别算法提取的特征泛化程度低,识别实时性差和识别率不高的问题,本文提出了一种基于KinectV2传感器的模板匹配手势识别方法。该方法利用Kinect Studio和Visual Gesture Builder建立手势动作数据库,提取人体关键骨骼间的夹角作为随时间变化的一维特征向量,借助动态规划思想,在动态时间规整(DTW)算法的基础上提出了加权DTW手势动作识别算法。通过对DTW算法的改进,使其规整路径更快的收敛,提高了手势动作识别的实时性和准确性,并在Unity 3D虚拟仿真实验平台中进行了实时性和有效性的验证实验,同时实现了简单的人机交互。 展开更多

关键词 kinectv2传感器 手势识别 骨骼角度特征 人机交互

在线阅读 下载PDF 职称材料

基于KinectV2的猪体三维点云重构与体尺测量 被引量：4

2

作者 李哲 林文祉 +1 位作者 翁智 郑志强 《软件导刊》 2024年第1期161-166,共6页

体尺参数是评价育肥猪生长状况的重要指标,针对单目CCD相机在猪体体尺测量中受角度、光源等因素影响导致的测量参数单一、测量结果误差较大等问题。首先利用深度相机KinectV2从正上方和左右两侧视角同步获取猪体局部点云数据;然后进行... 体尺参数是评价育肥猪生长状况的重要指标,针对单目CCD相机在猪体体尺测量中受角度、光源等因素影响导致的测量参数单一、测量结果误差较大等问题。首先利用深度相机KinectV2从正上方和左右两侧视角同步获取猪体局部点云数据;然后进行点云去噪、精简分割等处理,运用改进后的ICP点云配准技术处理点云信息;最后采用精确估算技术精简点云数据。在不同角度比较实验测量与人工测量的结果发现,猪体数据中体长平均相对误差为2.65%、体高平均相对误差为1.87%、体宽平均相对误差为1.75%、臀高平均相对误差为2.07%、臀宽平均相对误差为1.96%,整体上误差较小,证明了所提方法的有效性,以期为猪体尺寸测量提供新的解决方法。 展开更多

关键词 育肥猪 图像处理 kinectv2 三维点云 体尺测量

在线阅读 下载PDF 职称材料

基于Kinectv2传感器技术的交互式教育游戏设计与实现 被引量：1

3

作者 李帆 陆雅楠 《中小学电教（综合）》 2018年第7期140-144,共5页

在面向幼儿教育的教育游戏设计中,交互性和场景化是提高游戏沉浸感和参与度的两个重要设计方向。Kinect V2能够通过手势、肢体动作、语言等自然方式与终端交互,从而提高交互体验效果。本研究基于Kinect V2传感器,采用Unity3D引擎设计了... 在面向幼儿教育的教育游戏设计中,交互性和场景化是提高游戏沉浸感和参与度的两个重要设计方向。Kinect V2能够通过手势、肢体动作、语言等自然方式与终端交互,从而提高交互体验效果。本研究基于Kinect V2传感器,采用Unity3D引擎设计了面向幼儿教育场景的交互式体感游戏。在体感数据追踪上,利用Kinect V2传感器获取3D深度图像数据,通过骨骼追踪技术处理这些数据,从而得到实时的人体骨骼数据。在交互操作上,通过对人体各个骨骼点的空间坐标位置进行处理,实现手势识别和模拟鼠标运动与点击。 展开更多

关键词 kinectv2 UNITY3D 教育游戏 场景设计

原文传递

多视角深度相机的猪体三维点云重构及体尺测量 被引量：34

4

作者 尹令 蔡更元 +4 位作者 田绪红 孙爱东 石帅 钟浩杰 梁世豪 《农业工程学报》 EI CAS CSCD 北大核心 2019年第23期201-208,共8页

对活体牲畜三维重构,数据采集方式、快速配准融合方法、表型体尺测量方法缺乏成熟有效的方案,导致目前活体牲畜的自动体尺测量技术难以在养殖场中推广应用。该文以猪为研究对象运用消费级深度相机KinectV2从正上方和左右两侧3个不同角... 对活体牲畜三维重构,数据采集方式、快速配准融合方法、表型体尺测量方法缺乏成熟有效的方案,导致目前活体牲畜的自动体尺测量技术难以在养殖场中推广应用。该文以猪为研究对象运用消费级深度相机KinectV2从正上方和左右两侧3个不同角度同步获取在采集通道中自由行走猪的局部点云。局部点云采用邻域曲率变化法去噪,并运用基于轮廓连贯性点云配准融合,最后采用多体尺数据精确估算技术测定包括体长、体高、胸宽、腹围等数据。该文分别对比实验室中模型猪由传输带以5种不同速率经过通道和养殖场内25头猪逐一经过通道,2种情况下采集数据进行各项体尺测算结果。其结果显示模型猪在传输带上以0、0.3、0.6、0.9和1.2 m/s等5种不同速率下测量体长、体高、胸宽、腹围值与实测值的平均相对误差分别为1.77%、1.36%、2.74%和2.17%。养殖环境下对25头猪同样4种体尺值与实测值的平均相对误差分别为2.56%,2.32%,3.89%和4.51%。试验结果发现养殖场活体猪测量最小误差可以达到实验室环境下的效果,但是最大相对误差变化较大,其原因在于养殖场中猪自由行走采集数据时行为姿态发生很大变化。 展开更多

关键词 图像处理 算法 模型 猪 三维重构 体尺测量 kinectv2

在线阅读 下载PDF 职称材料

基于单样本学习的多特征人体姿态模型识别研究 被引量：11

5

作者 李国友 李晨光 +2 位作者 王维江 杨梦琪 杭丙鹏 《光电工程》 CAS CSCD 北大核心 2021年第2期31-40,共10页

随着人机交互、虚拟现实等相关领域的发展,人体姿态识别已经成为热门研究课题。由于人体属于非刚性模型,具有时变性的特点,导致识别的准确性和鲁棒性不理想。本文基于KinectV2体感摄像头采集的骨骼信息,结合人体角度和距离特征,提出了... 随着人机交互、虚拟现实等相关领域的发展,人体姿态识别已经成为热门研究课题。由于人体属于非刚性模型,具有时变性的特点,导致识别的准确性和鲁棒性不理想。本文基于KinectV2体感摄像头采集的骨骼信息,结合人体角度和距离特征,提出了一种基于单样本学习的模型匹配方法。首先,通过对采集的骨骼信息进行特征提取,计算关节点向量夹角和关节点的位移并设定阈值,其次待测姿态与模板姿态进行匹配计算,满足阈值限定范围则识别成功。实验结果表明,该方法能够实时的检测和识别阈值限定范围内定义的人体姿态,提高了识别的准确性和鲁棒性。 展开更多

关键词 姿态模型 骨骼数据 单样本学习 模型匹配 kinectv2

在线阅读 下载PDF 职称材料

基于点云语义分割的猪只体尺测量方法研究 被引量：15

6

作者 耿艳利 季燕凯 +1 位作者 岳晓东 付艳芳 《农业机械学报》 EI CAS CSCD 北大核心 2023年第7期332-338,380,共8页

生猪的体尺参数是生猪生长状态的重要评判标准,而人工测量体尺耗时耗力且容易造成猪只的应激反应,本文研究了无接触式猪只体尺参数测量方法,借鉴人工测量经验法,提出基于点云语义分割的猪只体尺测量方法。本文以大约克夏猪为研究对象,... 生猪的体尺参数是生猪生长状态的重要评判标准,而人工测量体尺耗时耗力且容易造成猪只的应激反应,本文研究了无接触式猪只体尺参数测量方法,借鉴人工测量经验法,提出基于点云语义分割的猪只体尺测量方法。本文以大约克夏猪为研究对象,搭建无接触式猪只点云采集平台,采集3510组猪只双侧点云数据;利用直通滤波器与随机采样一致性分割处理方法去除背景点云,基于统计滤波器去除离群点,采用体素下采样方法稀疏点云,完成猪只点云的预处理;基于PointNet网络,结合注意力模块构建语义分割模型,针对不同分割部位设计猪只体尺测量方法。试验结果表明,在自制数据集上,改进的语义分割模型准确率为86.3%,相较于PointNet、PointNet++和3D-RCNN分别高8、5.7、2.6个百分点;体尺的测量值与实测值最大绝对误差为6.8 cm,平均绝对误差均在5 cm以内,具有较高的估算准确性,此方法能够用于猪只体尺测量。本文将语义分割与体尺测量相结合,可为后续非接触测量提供思路。 展开更多

关键词 猪只体尺 kinectv2 语义分割 非接触测量

在线阅读 下载PDF 职称材料

基于体感识别的学生引体向上训练系统 被引量：3

7

作者 李文博 周磊 《物联网技术》 2018年第2期18-20,23,共4页

学生体质状态一直以来都是社会关注的热点,其中力量问题尤为明显,而目前尚未有合理有效的办法改善这一状况。文中提出的引体向上训练系统,结合物联网技术和机器视觉中的体感识别技术,利用云服务搭建了完整的解决方案架构,实现了学生日... 学生体质状态一直以来都是社会关注的热点,其中力量问题尤为明显,而目前尚未有合理有效的办法改善这一状况。文中提出的引体向上训练系统,结合物联网技术和机器视觉中的体感识别技术,利用云服务搭建了完整的解决方案架构,实现了学生日常引体向上训练的自动化和数据化,同时使得管理更科学、简单。系统主要运用Kinect V2智能摄像头传感器提取运动骨骼数据,使用步态识别算法与设计的有限状态机运动模板匹配进行引体向上运动识别,将用户个人信息以及运动结果在Web端显示。研究工作也为日常运动识别和训练提供了新的研究角度和方向。 展开更多

关键词 物联网 体感识别 kinectv2 引体向上 步态识别

在线阅读 下载PDF 职称材料

多频飞行时间相机实时深度补偿算法研究

8

作者 王森 王润孝 +1 位作者 左欣欣 于薇薇 《西北工业大学学报》 EI CAS CSCD 北大核心 2019年第1期152-159,共8页

针对多频飞行时间相机在曝光时间内物体运动以及相位融合中产生的偏差,提出一种基于光流以及空间核密度估计的实时补偿算法。首先获取原始的多频相位图像,计算出不同频率之间的相对光流,获得每种频率下的补偿相位;在此基础上针对不同频... 针对多频飞行时间相机在曝光时间内物体运动以及相位融合中产生的偏差,提出一种基于光流以及空间核密度估计的实时补偿算法。首先获取原始的多频相位图像,计算出不同频率之间的相对光流,获得每种频率下的补偿相位;在此基础上针对不同频率的相位做出可信度假设并利用空间核密度估计对其进行排名,获得最终的相位融合图并生成对应的深度图。实验部分,使用Kinect V2相机获取的原始多频相位图对算法进行验证,同时利用GPU进行并行加速;结果表明该算法可以实时对物体平行于光轴运动的相位融合偏差进行补偿,有效地提高了深度图像的精度和稳定性。 展开更多

关键词 飞行时间相机 多频 光流 空间核密度估计 kinectv2

在线阅读 下载PDF 职称材料

基于机器人操作系统的机械臂辅助超声扫描系统研究 被引量：8

9

作者 张娟 李锐 +6 位作者 程威 秦浩 吴诗尧 刘立 倪东 陈思平 钱建庭 《生物医学工程研究》 2018年第4期382-387,共6页

本研究提出了一种基于机器人操作系统(robot operating system,ROS)的机械臂辅助超声扫描系统,旨在减轻超声医生的劳动强度,降低对操作者的依赖,标准化扫查流程,提高扫描操作的准确度和效率。系统由ROS、Kinect V2视觉传感器、六轴机械... 本研究提出了一种基于机器人操作系统(robot operating system,ROS)的机械臂辅助超声扫描系统,旨在减轻超声医生的劳动强度,降低对操作者的依赖,标准化扫查流程,提高扫描操作的准确度和效率。系统由ROS、Kinect V2视觉传感器、六轴机械臂和超声采集装置等硬件平台组成。本系统首先利用Kinect V2实时获取场景的RGB彩色和深度图像,经内外参标定、配准后形成RGB-点云数据用以充分描述三维空间信息。通过对点云进行去噪、分割、表面法向量分析和运动轨迹提取等系列处理,再经由坐标系统转换,本系统即可进行机械臂坐标系统下的路径规划,进而引导机械臂持超声探头到指定区域的表面实施扫描动作,完成超声影像的实时采集。结果表明,基于ROS搭建系统平台,结合Kinect V2视觉导航,本系统可引导机械臂夹持超声探头较快速、较准确、较稳定地到达待扫查区域,实现自主的超声图像采集。 展开更多

关键词 机器人操作系统 机械臂 超声扫描 kinectv2 点云

暂未订购

基于视觉传感的智能运动训练系统的研发 被引量：1

10

作者 詹彬 周磊 《物联网技术》 2018年第9期55-58,共4页

针对当前大学生体质素质下降的状况,以及体质测试设备简陋易损坏,操作繁琐等缺点,我们结合最新体感识别技术,开发了一套完整的无接触体质测试系统。该系统利用微软Kinect V2智能摄像头,可实时准确地获取人体骨架关节点的三维空间位置信... 针对当前大学生体质素质下降的状况,以及体质测试设备简陋易损坏,操作繁琐等缺点,我们结合最新体感识别技术,开发了一套完整的无接触体质测试系统。该系统利用微软Kinect V2智能摄像头,可实时准确地获取人体骨架关节点的三维空间位置信息并将其转化为动作数据流,与设计有限状态机模板数据进行模式匹配,完成静态骨骼识别。利用Kinect的优势进行步态识别算法的设计,以实现运动识别。同时该方法还具有无接触、多人检测、一机多测等优势,智能打分机制可将用户运动数据实时上传至Web。 展开更多

关键词 运动识别 DTW动态匹配算法 kinectv2 骨骼识别 步态识别

在线阅读 下载PDF 职称材料

新型超高车辆检测及预警系统

11

作者 李琳 邓晶 +2 位作者 杜凯 陈丹 晏先涛 《公路》 北大核心 2024年第8期419-424,共6页

针对限高路段超高车辆与限高设施碰撞事故频发,设计了一种全面优化的车辆高度检测系统。该系统利用KinectV2深度相机从2个方向采集点云对车辆进行三维测量,得到其高度后进行判断并通过RK3588控制报警模块输出警示信息。系统设计中融入... 针对限高路段超高车辆与限高设施碰撞事故频发,设计了一种全面优化的车辆高度检测系统。该系统利用KinectV2深度相机从2个方向采集点云对车辆进行三维测量,得到其高度后进行判断并通过RK3588控制报警模块输出警示信息。系统设计中融入了基于小程序的交互功能,使得管理人员能够便捷地修改限高阈值,并实时发布相关的限高信息,有助于减少因信息滞后导致的事故。该系统实用性强,不仅适用于城市道路,还可广泛应用于高速公路、桥梁等限高路段,为解决限高路段超高车辆碰撞限高架事故频发问题提供了有效的技术支撑,对于提升交通安全管理水平具有重要意义。 展开更多

关键词 交通工程 超高检测 远程感知 防撞预警 三维测量 kinectv2相机 注意力机制

原文传递