期刊文献+
共找到34篇文章
< 1 2 >
每页显示 20 50 100
基于关联分区和ST-GCN的人体行为识别 被引量:10
1
作者 刘锁兰 顾嘉晖 +1 位作者 王洪元 张云鹏 《计算机工程与应用》 CSCD 北大核心 2021年第13期168-175,共8页
基于骨骼的动作识别因不受人体物理特征的影响,简单清晰地传达了人体行为识别的重要信息而受到广泛关注。传统的应用程序骨架建模通常依赖遍历规则的人为设置而导致表达能力有限和推广困难。因此,在近年来热门的时空图卷积网络(ST-GCN)... 基于骨骼的动作识别因不受人体物理特征的影响,简单清晰地传达了人体行为识别的重要信息而受到广泛关注。传统的应用程序骨架建模通常依赖遍历规则的人为设置而导致表达能力有限和推广困难。因此,在近年来热门的时空图卷积网络(ST-GCN)模型基础上提出了一种新的划分骨架关节点的分区策略。该策略相比于原始分区方法加强了身体相对位置之间的关系,从而有利于提高骨架关节点信息在时间和空间上的关联。与此同时,在训练过程中通过设置不同的迭代学习率以进一步提高识别精度。在两个不同性质的大规模数据集Kinetics和NTURGB+D上与现有方法进行识别效果的比较,实验结果表明了该方法的有效性。 展开更多
关键词 行为识别 关节点 时空图卷积网络(st-gcn) 分区策略 学习率
在线阅读 下载PDF
基于ST-GCN的空中交通管制员不安全行为识别 被引量:5
2
作者 王超 徐楚昕 +1 位作者 董杰 王志锋 《中国安全科学学报》 CAS CSCD 北大核心 2023年第5期42-48,共7页
为预防和监督空中交通管制(ATC)工作中的违章行为,利用智能视频分析技术,研究适用于管制员坐姿工作的不安全行为识别模型。首先,分析管制员不安全工作行为的隐蔽性特征,总结5种典型管制员不安全行为,包括伸懒腰、瞌睡、低头入睡、歪头... 为预防和监督空中交通管制(ATC)工作中的违章行为,利用智能视频分析技术,研究适用于管制员坐姿工作的不安全行为识别模型。首先,分析管制员不安全工作行为的隐蔽性特征,总结5种典型管制员不安全行为,包括伸懒腰、瞌睡、低头入睡、歪头入睡和半躺入睡,并构建管制员不安全工作状态视频数据集(CUWS);其次,提出一种能描述管制员坐姿的骨架关键点拓展算法,基于时空图卷积网络(ST-GCN)搭建适用于管制员坐姿与腿部遮蔽情况下的不安全行为识别模型ATC-ST-GCN,并给出管制员不安全行为识别的工作流程;最后,利用CUWS数据集进行ATC-ST-GCN模型的训练和测试,并利用管制室实际监控视频开展验证试验。结果表明:该模型能够在有限验证数据集上实现5种典型不安全行为识别,准确率达到93.65%。试验结果证明该模型具有一定的科学性与有效性。 展开更多
关键词 时空图卷积网络(st-gcn) 空中交通管制(ATC) 不安全行为 管制员 行为识别
原文传递
ST-GCN在建筑工人不安全动作识别中的应用 被引量:23
3
作者 刘耀 焦双健 《中国安全科学学报》 CAS CSCD 北大核心 2022年第4期30-35,共6页
为准确及时地识别施工现场工人的不安全动作,运用计算机视觉的方法,结合图像识别技术和建筑安全知识,提出一种基于骨架的实时识别方法。将姿态估计算法与动作识别算法结合搭建组合模型,通过全面的数据进行模型训练,进而实现动作分类和... 为准确及时地识别施工现场工人的不安全动作,运用计算机视觉的方法,结合图像识别技术和建筑安全知识,提出一种基于骨架的实时识别方法。将姿态估计算法与动作识别算法结合搭建组合模型,通过全面的数据进行模型训练,进而实现动作分类和不安全动作的识别,其中,AlphaPose用于姿态估计提取骨骼关键点坐标位置,时空图卷积网络(ST-GCN)用于动作识别,并通过试验进行验证。结果表明:该方法识别爬梯危险动作的准确率可以达到98.48%,同时,ST-GCN与支持向量机、随机森林、长短期记忆网络(LSTM)相比,具有更强的泛化能力。该方法通过对现场工人的不安全动作进行实时识别和预警,可改善传统安全管理模式,提高安全管理信息化水平。 展开更多
关键词 时空图卷积网络(st-gcn) 建筑工人 不安全行为 动作识别 AlphaPose 长短期记忆网络(LSTM)
原文传递
基于改进的ST-GCN模型的跌倒检测算法 被引量:3
4
作者 王君涛 潘长乐 +1 位作者 杨龙飞 詹亮 《信息技术与信息化》 2022年第2期69-71,75,共4页
针对当下基于图像的传统跌倒检测算法难以提取时域动作特征所导致的模型检测过程中所存在无法提取动态信息问题,建立了一种基于关节点提取和改进的ST-GCN模型的实时跌倒检测算法。首先根据姿态识别算法Alphapose提取视频中人体的骨架关... 针对当下基于图像的传统跌倒检测算法难以提取时域动作特征所导致的模型检测过程中所存在无法提取动态信息问题,建立了一种基于关节点提取和改进的ST-GCN模型的实时跌倒检测算法。首先根据姿态识别算法Alphapose提取视频中人体的骨架关节点信息;然后对时域中的骨架关节点序列进行Kalman滤波估计,得到稳定变化的人体时空图;最后在传统模型基础上,考虑了一种适用于检测跌倒的新型图卷积划分策略,相比原有划分策略,加强了身体相对位置的整体联系,使得利用此模型对时空图中的人体动作进行识别。算法在数据集UR fall Detection和Multicam上与现有的几种方法进行比较,实验结果证明了文章算法的有效性。 展开更多
关键词 时空图 动作识别 KALMAN滤波 st-gcn
在线阅读 下载PDF
一种融合ST-GCN算法的高速公路节假日流量预测模型 被引量:2
5
作者 贾百强 徐延军 周涛 《上海船舶运输科学研究所学报》 2022年第5期58-65,共8页
为高效准确地预测节假日期间高速公路重要路段的交通流量,提出一种融合时空图卷积网络(Spatio-Temporal Graph Convolutional Network,ST-GCN)的高速公路节假日流量预测模型。该模型采用平均速度、交通流量等重要的交通指标作为交通状... 为高效准确地预测节假日期间高速公路重要路段的交通流量,提出一种融合时空图卷积网络(Spatio-Temporal Graph Convolutional Network,ST-GCN)的高速公路节假日流量预测模型。该模型采用平均速度、交通流量等重要的交通指标作为交通状态评价体系要素,对节假日期间高速公路的交通态势进行综合预测;融合ST-GCN算法模型,综合考虑时空特性,得到准确度较高的预测结果。以宁夏回族自治区高速公路的节假日交通信息为研究对象,对该模型的有效性进行验证,结果表明,该模型相比其他常用预测模型准确度更高,具有更好的稳定性和鲁棒性,预测结果可供高速公路的管理和运营参考。 展开更多
关键词 时空图卷积网络(st-gcn)模型 流量预测 高速公路 节假日 交互预测 在线学习
在线阅读 下载PDF
基于ST-GCN短时路况预测算法的预警系统 被引量:1
6
作者 李长亮 《上海船舶运输科学研究所学报》 2023年第1期49-54,共6页
为提升高速公路车速预测的准确性,针对现有车速预测模型存在的时间相关性和空间相关性部分缺失的问题,提出一种基于时空图卷积网络(Spatio-Temporal Graph Convolution Network,ST-GCN)短时路况预测算法的预警系统。该算法综合考虑时间... 为提升高速公路车速预测的准确性,针对现有车速预测模型存在的时间相关性和空间相关性部分缺失的问题,提出一种基于时空图卷积网络(Spatio-Temporal Graph Convolution Network,ST-GCN)短时路况预测算法的预警系统。该算法综合考虑时间相关性和空间相关性的影响,根据实时和历史的交通数据,通过建立ST-GCN模型分析预测未来某段时间的交通流速度和路况。将预测结果推送给布设在高速公路上的多彩智能情报板,通过多彩智能情报板上显示的信息诱导司乘用户的行为,从而降低事故发生率,提升高速公路通行效率。 展开更多
关键词 短时路况预测 速度预测 时空图卷积网络(st-gcn) 注意力网络 长短记忆网络
在线阅读 下载PDF
基于改进ST-GCN的10 kV带电作业人员视频异常行为识别方法 被引量:9
7
作者 吴田 万亚旭 +3 位作者 王申华 肖宾 方春华 黎鹏 《南方电网技术》 CSCD 北大核心 2024年第10期31-39,72,共10页
为确保常态化配网带电作业时人员和设备的安全,异常行为识别是必不可少的技术手段,但现有带电作业行为识别方法存在准确率低、可识别种类少以及受背景干扰导致漏检和误检等问题。提出了一种基于改进时空图卷积网络(spatial temporal gra... 为确保常态化配网带电作业时人员和设备的安全,异常行为识别是必不可少的技术手段,但现有带电作业行为识别方法存在准确率低、可识别种类少以及受背景干扰导致漏检和误检等问题。提出了一种基于改进时空图卷积网络(spatial temporal graph convolutional networks,ST-GCN)的10 kV带电作业视频异常行为识别方法。首先,采用目标检测与跟踪的方法在视频人体区域添加掩膜,排除复杂背景的影响;然后,利用轻量化改进姿态估计模型获取人体骨架,以多帧骨架序列构建时空图;最后,由ST-GCN提取时空图的空间姿态与时序信息并引入通道注意力(squeeze-and-excitation networks,SENet)模块强化动作特征后完成带电作业行为识别。以带电作业视频构建行为数据集,选取绝缘检测等5类典型行为进行验证。试验结果表明,该方法提升了人体姿态估计的速度,约束了骨架检测区域,降低了肢体误检率和漏检率;能有效识别带电作业行为,平均准确率达88%;在复杂环境下有良好的泛化性,为带电作业安全监护的智能化提供了有效参考。 展开更多
关键词 行为识别 带电作业 时空图卷积网络 人体姿态估计 安全监护
在线阅读 下载PDF
基于ST-GCN警用巡逻机器人警情识别系统设计 被引量:5
8
作者 胡丽军 吴燕玲 +1 位作者 宋全军 徐湛楠 《传感器与微系统》 CSCD 北大核心 2023年第6期78-81,共4页
针对现有警用巡逻机器人警情识别系统识别种类单一、识别率较低等问题,基于时空—图卷积网络(ST-GCN)和OpenPose算法的融合,面向跌倒(fall)、打砸(smash)和推搡(push)3种警情,设计了警用巡逻机器人警情识别系统。通过在真实场景测试,3... 针对现有警用巡逻机器人警情识别系统识别种类单一、识别率较低等问题,基于时空—图卷积网络(ST-GCN)和OpenPose算法的融合,面向跌倒(fall)、打砸(smash)和推搡(push)3种警情,设计了警用巡逻机器人警情识别系统。通过在真实场景测试,3种警情识别率分别为:跌倒85%,打砸80%,推搡83%;实时识别帧率为10 fps。实验结果表明:所设计的警情识别系统可以实现多种警情的实时、准确、可靠识别,具有较高的应用价值。 展开更多
关键词 时空—图卷积网络 OpenPose算法 警情识别 警用巡逻机器人
在线阅读 下载PDF
边云协同计算下基于ST-GCN的监控视频行为识别机制 被引量:3
9
作者 蒋伟进 孙永霞 +3 位作者 朱昊冉 陈萍萍 张婉清 陈君鹏 《南京大学学报(自然科学版)》 CAS CSCD 北大核心 2022年第1期163-174,共12页
智慧城市的迅速发展为人们的日常生活带来了极大的便捷,其中视频监控系统越来越智能化是信息技术逐渐成熟的必然结果.人体行为识别是智能安防监控领域的重要任务之一,但大量的边缘监控设备产生了井喷式图像视频数据,传统单一的云计算模... 智慧城市的迅速发展为人们的日常生活带来了极大的便捷,其中视频监控系统越来越智能化是信息技术逐渐成熟的必然结果.人体行为识别是智能安防监控领域的重要任务之一,但大量的边缘监控设备产生了井喷式图像视频数据,传统单一的云计算模式已无法全面有效地应对海量数据的计算与处理.提出一种大数据驱动下采用边云协同计算的人体行为识别机制,将以往中心化的计算扩展为边缘、云端协同处理.首先,在边缘节点n0对视频进行相似帧去除的预处理并对提取的骨架序列进行多层次表不,然后云端对时空图卷积神经网络(Spatial Temporal Graph ConvNet,ST-GCN)模型进行训练并将其部署至边缘节点N1-Nm,边缘节点使用训练好的模型完成行为识别任务并将结果上传至云端进行融合得出最终行为类别.实验结果证明,所提方案能有效减少以往中心化计算的网络传输量及云端存储压力问题,且边云协同的优势使得模型识别的准确率稳定提升了2.2%以上. 展开更多
关键词 边云协同 行为识别 时空图卷积 骨架序列 相似帧去除
在线阅读 下载PDF
基于ST-GCN的形体动作质量评估算法分析
10
作者 叶倩文 肖秦琨 李梦茹 《集成电路应用》 2023年第1期98-99,共2页
阐述一种基于时空图卷积的太极拳动作质量评估框架,通过轻量级OpenPose姿态估计获得训练动作的骨架序列数据,然后使用时空图卷积网络(Spatial Temporal Graph Convolutional Network,STGCN)提取动作的时空特征与标准动作的特征对比,利... 阐述一种基于时空图卷积的太极拳动作质量评估框架,通过轻量级OpenPose姿态估计获得训练动作的骨架序列数据,然后使用时空图卷积网络(Spatial Temporal Graph Convolutional Network,STGCN)提取动作的时空特征与标准动作的特征对比,利用孪生网络学习动作的质量分数。 展开更多
关键词 智能算法 姿态估计 时空图卷积网络
在线阅读 下载PDF
基于改进关节点联系的ST-GCN行为识别办法
11
作者 李圣京 李树斌 《通信电源技术》 2021年第24期28-32,共5页
人体行为识别在监控安防等多个领域有重要的实用性。基于人体骨骼关节点的行为识别有很好的鲁棒性,并且在计算量和存储空间上都有很大的优势。时空图卷积神经网络(Spatial-Temporal Graph Convolution Networks,ST-GCN)模型开创图卷积... 人体行为识别在监控安防等多个领域有重要的实用性。基于人体骨骼关节点的行为识别有很好的鲁棒性,并且在计算量和存储空间上都有很大的优势。时空图卷积神经网络(Spatial-Temporal Graph Convolution Networks,ST-GCN)模型开创图卷积神经网络处理姿态估计信息的先河,针对ST-GCN不能很好关联所有关节特征的缺点,提出通过构建共现特征学习结构以及新的注意力机制加强关节点的联系,同时提出集成学习在线蒸馏手段,增强模型的泛化能力。所提模型在Kinetics-skeleton数据集上取得31.25%的Top-1精度,相比于ST-GCN算法提升了0.44%;在NTU-RGB+D的X-Sub子数据集与X-View子数据集分别取得86.7%与94.6%的Top-1精度,对比ST-GCN算法提升了5.2%和6.3%。 展开更多
关键词 行为识别 姿态估计 时空图卷积神经网络 注意力机制 蒸馏学习 集成学习
在线阅读 下载PDF
基于骨架识别的城轨车站监控视频乘客行为特征辨识研究 被引量:4
12
作者 管洋 贾利民 +1 位作者 陶思涵 豆飞 《都市快轨交通》 北大核心 2025年第1期106-111,共6页
城市轨道交通领域传统监控分析方法对视频监控图像(如摔倒、晕倒和打斗等异常行为识别)漏识率高、参数调整复杂,且难以高效地应用于现实城轨车站监控场景,针对此问题,采用基于骨架模式识别的人体姿态特征辨识框架,引入基于人体骨架的姿... 城市轨道交通领域传统监控分析方法对视频监控图像(如摔倒、晕倒和打斗等异常行为识别)漏识率高、参数调整复杂,且难以高效地应用于现实城轨车站监控场景,针对此问题,采用基于骨架模式识别的人体姿态特征辨识框架,引入基于人体骨架的姿态估计技术,采用Alpha Pose模型对乘客姿态进行精确估计,并结合时空图卷积网络(spatial temporal graph convolutional networks,ST-GCN)模型的方法,实现对城轨车站监控场景中异常行为的辨识。在COCO数据集和MPII数据集上分别达到了72.3 mAP和82.1 mAP的效果,相比较于Open Pose模型提升高达17%,验证了模型的有效性和实用性。结果表明,本文所提出的方法不仅提高了乘客行为的识别速度,同时具备对复杂场景的适应能力,为城轨安全监控提供一种新的技术方案。 展开更多
关键词 轨道交通 骨架识别 模式识别 城轨车站安全 乘客行为特征辨识 st-gcn
在线阅读 下载PDF
基于深度学习的人体持有武器识别研究
13
作者 黄兆年 卢龙生 +1 位作者 程朋 李恒 《舰船电子工程》 2025年第3期38-42,共5页
论文提出一种基于改进的时空卷积神经网络加上YOLOv5识别人员是否携带武器的方法,此方法首先从边境的监控录像中提取单帧为单元提取人体骨架点信息,然后以时空图卷积神经网络为框架聚合多帧图像信息,判别人员动作。再通过YOLOv5和人体... 论文提出一种基于改进的时空卷积神经网络加上YOLOv5识别人员是否携带武器的方法,此方法首先从边境的监控录像中提取单帧为单元提取人体骨架点信息,然后以时空图卷积神经网络为框架聚合多帧图像信息,判别人员动作。再通过YOLOv5和人体骨架检测人员和武器之间的关系,判断运动的人员是否携带武器。最后通过实验验证方法的有效性,结果表明该方法可以充分利用多帧图像中的骨架点之间的时空信息,来准确识别人员运动情况,以及是否携带武器,具有很好的准确率和鲁棒性。 展开更多
关键词 动作识别 武器识别 骨架信息提取 时空图卷积神经网络
在线阅读 下载PDF
基于深度学习的井下人员不安全行为识别与预警系统研究 被引量:23
14
作者 李雯静 刘鑫 《金属矿山》 CAS 北大核心 2023年第3期177-184,共8页
井下作业人员的不安全行为是矿山事故发生的主要原因之一,现有的井下监控方式仍然以人工监控为主,无法快速识别作业人员的不安全行为,导致难以实时预警。设计了一种基于深度学习的井下人员不安全行为识别与预警系统开发方案,首先制作以... 井下作业人员的不安全行为是矿山事故发生的主要原因之一,现有的井下监控方式仍然以人工监控为主,无法快速识别作业人员的不安全行为,导致难以实时预警。设计了一种基于深度学习的井下人员不安全行为识别与预警系统开发方案,首先制作以井下环境为背景的数据集,然后采用YOLOv4网络模型对矿工及安全帽等进行识别以判断安全帽佩戴情况,再采用OpenPose算法及ST-GCN模型对监控视频中的矿工行为进行识别,最后通过系统对不安全行为进行自动预警。结合多种深度学习和计算机开发技术开发了一种井下人员不安全行为识别与预警系统,为井下人员的安全管理提供了新的思路,对于智慧矿山建设具有参考意义。 展开更多
关键词 智慧矿山 深度学习 st-gcn YOLOv4 监控系统
在线阅读 下载PDF
时空上下文感知的下一个PoI推荐方法
15
作者 海燕 王静 刘志中 《计算机应用研究》 北大核心 2025年第11期3275-3283,共9页
随着基于位置的社交网络的快速发展,下一个PoI(point of interest)推荐已成为推荐领域的研究热点。然而现有研究模型忽略了PoI的时空特征以及上下文信息对下一个PoI推荐的效果。针对该问题,提出一种时空上下文感知的下一个PoI推荐方法... 随着基于位置的社交网络的快速发展,下一个PoI(point of interest)推荐已成为推荐领域的研究热点。然而现有研究模型忽略了PoI的时空特征以及上下文信息对下一个PoI推荐的效果。针对该问题,提出一种时空上下文感知的下一个PoI推荐方法。首先,利用图注意力网络(GAT)学习包含社交关系的用户表征;并且通过流行度增强二部图神经网络(PEBGNN)学习含有PoI交互偏好的用户表征和PoI表征;同时,利用时空图卷积网络(ST-GCN)学习PoI时空转移偏好的PoI表征;最后,通过融合所学到的用户表征和PoI表征,计算出用户对于各个PoI的预测评分,以此为基础为用户推荐下一个PoI。为了验证该方法的有效性,在Gowalla、Foursquare以及Yelp这三个公开的数据集上进行了测试。实验结果显示,相比于多个基准模型,所提方法在准确率和召回率方面均展现出了显著的优势,分别平均提升28.53%和7.65%。 展开更多
关键词 下一个PoI推荐 PoI流行度 时空上下文 时空转移图 图注意力网络 时空图卷积网络
在线阅读 下载PDF
融合注意力和多尺度时空图网络的人体行为识别 被引量:2
16
作者 王林 田晨光 《单片机与嵌入式系统应用》 2023年第4期41-44,49,共5页
提取一种融合注意力和多尺度时空图网络的人体行为识别算法,在时空图网络卷积层融入通道-空间级联注意力机制以及在时间图卷积中增加多尺度卷积,利用改进的算法通过嵌入式平台在NTU RGB+D数据集的两个评估基准X-Sub和X-View上的准确率... 提取一种融合注意力和多尺度时空图网络的人体行为识别算法,在时空图网络卷积层融入通道-空间级联注意力机制以及在时间图卷积中增加多尺度卷积,利用改进的算法通过嵌入式平台在NTU RGB+D数据集的两个评估基准X-Sub和X-View上的准确率达到了89.1%和92.5%。实验结果表明,该方法具有可靠的精度,可以应用于嵌入式平台完成人体行为识别任务。 展开更多
关键词 st-gcn 注意力机制 多尺度时间卷积 嵌入式平台 人体行为识别
在线阅读 下载PDF
基于多元复合深度学习的肉鸽行为识别算法研究
17
作者 朱立学 陈品岚 +2 位作者 黄伟锋 张世昂 李小敏 《中国家禽》 北大核心 2023年第11期112-125,共14页
为实现肉鸽行为准确识别,研究提出一种基于多元复合深度学习的肉鸽行为识别算法。该算法通过使用YOLOX-s模型检测肉鸽目标区域作为AlphaPose肉鸽姿态预估模型输入预估肉鸽骨架每个关键点,结合连续视频帧的骨架变化关键点数据构建肉鸽骨... 为实现肉鸽行为准确识别,研究提出一种基于多元复合深度学习的肉鸽行为识别算法。该算法通过使用YOLOX-s模型检测肉鸽目标区域作为AlphaPose肉鸽姿态预估模型输入预估肉鸽骨架每个关键点,结合连续视频帧的骨架变化关键点数据构建肉鸽骨架时空图作为ST-GCN肉鸽行为识别模型输入,实现肉鸽行为识别。对YOLOX-s模型使用CSPResNet替代其主干网络,并减少CSP模块中的残差块以保留更多肉鸽图像的中层细节特征,在姿态预估模型中使用ECCWB-LiteHRNet作为其单目标姿态估计器,以提高肉鸽关键点特征识别能力。结果显示,改进后的YOLOX-s模型平均精度、检测速度分别为0.985、40.2fps,较原模型提高了0.002、6.9 fps;姿态预估模型平均精度、平均召回率和检测速度分别为0.887、0.921和28.5 fps,较原模型提高了0.036、0.016和12.9fps;ST-GCN模型行为识别平均准确率为0.970,单帧推理时间约为15 ms,最终多进程模型并行推理平均帧处理速度为28.5 fps,经过Tensorrt加速后平均帧处理速度可达50.8 fps。研究表明,ST-GCN模型能够快速准确地识别出肉鸽当前行为,且改进后的姿态预估模型可为ST-GCN模型提供更加稳定的骨架数据,为通过行为特征感知肉鸽身体信息及开展数字化健康管理提供技术支撑。 展开更多
关键词 肉鸽 行为识别 YOLOX AlphaPose st-gcn
原文传递
时空图卷积网络的骨架识别硬件加速器设计
18
作者 谭会生 严舒琪 杨威 《电子测量技术》 北大核心 2024年第11期36-43,共8页
随着人工智能技术的不断发展,神经网络的数据规模逐渐扩大,神经网络的计算量也迅速攀升。为了减少时空图卷积神经网络的计算量,降低硬件实现的资源消耗,提升人体骨架识别时空图卷积神经网络(ST-GCN)实际应用系统的处理速度,利用现场可... 随着人工智能技术的不断发展,神经网络的数据规模逐渐扩大,神经网络的计算量也迅速攀升。为了减少时空图卷积神经网络的计算量,降低硬件实现的资源消耗,提升人体骨架识别时空图卷积神经网络(ST-GCN)实际应用系统的处理速度,利用现场可编程门阵列(FPGA),设计开发了一个基于时空图卷积神经网络的骨架识别硬件加速器。通过对原网络模型进行结构优化与数据量化,减少了FPGA实现约75%的计算量;利用邻接矩阵稀疏性的特点,提出了一种稀疏性矩阵乘加运算的优化方法,减少了约60%的乘法器资源消耗。经过对人体骨架识别实验验证,结果表明,在时钟频率100 MHz下,相较于CPU,FPGA加速ST-GCN单元,加速比达到30.53;FPGA加速人体骨架识别,加速比达到6.86。 展开更多
关键词 人体骨架识别 时空图卷积神经网络(st-gcn) 硬件加速器 现场可编程门阵列(FPGA) 稀疏矩阵乘加运算硬件优化
原文传递
基于人-物交互关系检测的带电作业人员行为识别方法研究 被引量:5
19
作者 冯兴龙 吴田 +4 位作者 万亚旭 肖宾 方春华 黎鹏 赵慧敏 《中国安全生产科学技术》 CAS CSCD 北大核心 2024年第9期205-211,共7页
为解决现有视频行为识别方法难以区分带电作业过程中某些相似行为、可识别行为种类少、未高效利用人员与物品间交互关系等问题,提出1种基于人-物交互关系检测的配网带电作业人员行为识别方法。利用轻量化姿态估计算法识别人员骨架序列,... 为解决现有视频行为识别方法难以区分带电作业过程中某些相似行为、可识别行为种类少、未高效利用人员与物品间交互关系等问题,提出1种基于人-物交互关系检测的配网带电作业人员行为识别方法。利用轻量化姿态估计算法识别人员骨架序列,然后通过时空图卷积网络(spatial temporal graph convolutional networks,ST-GCN)提取人体运动的时空间特征并进行初步分类。对于由骨骼姿态无法有效区分的相似行为,采用目标检测算法识别人员所用工器具及使用状态,并通过融合人体动作与作业工器具所含行为信息,实现视频行为的精确识别。研究结果表明:该方法能有效识别带电作业行为,对相似行为的识别准确率约为88.9%,相较于现有基于骨架序列的带电作业人员行为方法提升约53个百分点。研究结果可为提高现场安全管控水平提供参考思路。 展开更多
关键词 带电作业 人-物交互关系 行为识别 st-gcn 骨架序列
在线阅读 下载PDF
基于图卷积网络的儿童坐姿检测学习桌椅设计方法研究 被引量:6
20
作者 张飞宇 兰扬 +4 位作者 朱伟 宋玲 王张恒 李芳 孙德林 《家具与室内装饰》 北大核心 2024年第1期96-100,共5页
儿童长期处于伏案学习的状态,不良坐姿对儿童生长发育容易造成严重影响,对儿童坐姿的矫正已刻不容缓。通过对儿童在学习桌椅上的坐姿行为调研,基于OpenPose姿态估计算法进行坐姿检测分析,引入ST-GCN模型进行坐姿识别与评判,结果表明:使... 儿童长期处于伏案学习的状态,不良坐姿对儿童生长发育容易造成严重影响,对儿童坐姿的矫正已刻不容缓。通过对儿童在学习桌椅上的坐姿行为调研,基于OpenPose姿态估计算法进行坐姿检测分析,引入ST-GCN模型进行坐姿识别与评判,结果表明:使用ST-GCN模型能够快速准确识别儿童的八种坐姿,并根据识别结果对儿童进行有效的错误坐姿提示,其Macro-F1和Micro-F1评价指标分别提高了6.8%和7.4%。同时表明儿童坐姿矫正在自适应儿童学习桌椅上应用的可行性及有效性,可为智能儿童课桌椅的设计提供技术支撑。 展开更多
关键词 时空图卷积网络(st-gcn) 儿童坐姿识别 学习桌椅
在线阅读 下载PDF
上一页 1 2 下一页 到第
使用帮助 返回顶部