期刊文献+
共找到1,249篇文章
< 1 2 63 >
每页显示 20 50 100
改进Deep Q Networks的交通信号均衡调度算法
1
作者 贺道坤 《机械设计与制造》 北大核心 2025年第4期135-140,共6页
为进一步缓解城市道路高峰时段十字路口的交通拥堵现象,实现路口各道路车流均衡通过,基于改进Deep Q Networks提出了一种的交通信号均衡调度算法。提取十字路口与交通信号调度最相关的特征,分别建立单向十字路口交通信号模型和线性双向... 为进一步缓解城市道路高峰时段十字路口的交通拥堵现象,实现路口各道路车流均衡通过,基于改进Deep Q Networks提出了一种的交通信号均衡调度算法。提取十字路口与交通信号调度最相关的特征,分别建立单向十字路口交通信号模型和线性双向十字路口交通信号模型,并基于此构建交通信号调度优化模型;针对Deep Q Networks算法在交通信号调度问题应用中所存在的收敛性、过估计等不足,对Deep Q Networks进行竞争网络改进、双网络改进以及梯度更新策略改进,提出相适应的均衡调度算法。通过与经典Deep Q Networks仿真比对,验证论文算法对交通信号调度问题的适用性和优越性。基于城市道路数据,分别针对两种场景进行仿真计算,仿真结果表明该算法能够有效缩减十字路口车辆排队长度,均衡各路口车流通行量,缓解高峰出行方向的道路拥堵现象,有利于十字路口交通信号调度效益的提升。 展开更多
关键词 交通信号调度 十字路口 Deep q networks 深度强化学习 智能交通
在线阅读 下载PDF
基于类加权迁移深度Q网络策略的分层数据存储框架
2
作者 冯刚 《计算机应用与软件》 北大核心 2026年第2期387-397,共11页
为了实现数据管理的高效性和适用能力,提出一种基于类加权迁移深度Q网络策略的分层数据存储框架。为了提升其在不同存储解决方案之间进行在线动态数据传输的能力,以及根据数据访问模式和可用性做出决策的能力,引入类加权迁移深度Q网络... 为了实现数据管理的高效性和适用能力,提出一种基于类加权迁移深度Q网络策略的分层数据存储框架。为了提升其在不同存储解决方案之间进行在线动态数据传输的能力,以及根据数据访问模式和可用性做出决策的能力,引入类加权迁移深度Q网络策略来解决分层存储系统中的数据迁移问题,同时忽略源异常值,有效激励了正知识的转移,提升域自适应的效果。最后设计了一个仿真软件和一个云框架进行试验测试,结果证明了提出方法的高效性和自适应能力。 展开更多
关键词 深度q网络 动态迁移策略 分层数据存储 云框架
在线阅读 下载PDF
基于改进深度Q网络的异构无人机快速任务分配
3
作者 王月海 邱国帅 +3 位作者 邢娜 赵欣怡 王婕 韩曦 《工程科学学报》 北大核心 2026年第1期142-151,共10页
随着无人机技术的快速发展,多无人机系统在执行复杂任务时展现出巨大潜力,高效的任务分配策略对提升多无人机系统的整体性能至关重要.然而,传统方法如集中式优化、拍卖算法及鸽群算法等,在面对复杂环境干扰时往往难以生成有效的分配策略... 随着无人机技术的快速发展,多无人机系统在执行复杂任务时展现出巨大潜力,高效的任务分配策略对提升多无人机系统的整体性能至关重要.然而,传统方法如集中式优化、拍卖算法及鸽群算法等,在面对复杂环境干扰时往往难以生成有效的分配策略,为此,本文考虑了环境不确定性如不同风速和降雨量,重点研究了改进的强化学习算法在无人机任务分配中的应用,使多无人机系统能够迅速响应并实现资源的高效利用.首先,本文将无人机任务分配问题建模为马尔可夫决策过程,通过神经网络进行策略逼近用以任务分配中高效处理高维和复杂的状态空间,同时引入优先经验重放机制,有效降低了在线计算的负担.仿真结果表明,与其他强化学习方法相比,该算法具有较强的收敛性.在面对复杂环境时,其鲁棒性更为显著.此外,该算法在处理不同任务时仅需0.24 s即可完成一组适合的无人机分配,并能够快速生成大规模无人机集群的任务分配方案. 展开更多
关键词 无人机群 任务分配 强化学习 深度q网络 马尔可夫决策过程
在线阅读 下载PDF
基于深度Q网络的分布式车辆路径规划策略研究
4
作者 文家燕 王怡博 景永年 《工业控制计算机》 2026年第2期94-96,共3页
针对智能网联汽车在非结构化环境中路径规划存在学习效率低、泛化能力不足、数据隐私安全性不足等问题,提出一种基于深度Q网络(Deep Q-Network,DQN)的分布式车辆路径规划方法。设计了动态权重分配算法,结合本地数据归一化技术,对多源车... 针对智能网联汽车在非结构化环境中路径规划存在学习效率低、泛化能力不足、数据隐私安全性不足等问题,提出一种基于深度Q网络(Deep Q-Network,DQN)的分布式车辆路径规划方法。设计了动态权重分配算法,结合本地数据归一化技术,对多源车辆模型训练参数进行整合,平衡模型性能的同时保护隐私安全。引入云端共享经验池机制,消除跨场景数据分布偏移,加速全局模型收敛。仿真实验表明,相较于传统DQN算法,提出的算法在环境中路径规划成功率提升显著,模型达到成功率90%时所需的训练回合数减少77.6%。 展开更多
关键词 深度q网络 路径规划 联邦学习 归一化
在线阅读 下载PDF
干扰环境下DQN结合反步控制的无人船路径跟随
5
作者 路春宇 李震 +1 位作者 王楠 王宇轩 《舰船科学技术》 北大核心 2026年第3期145-153,共9页
为了解决无人水面船(USV)在复杂海洋环境中路径跟随的控制问题,本文构建基于MAVLink的通信系统,实现领航船舶与受控船舶间的实时状态传输,确保受控船舶能够根据领航船舶的实时位置、速度等信息进行动态调整,并利用深度Q网络(Deep Q-Netw... 为了解决无人水面船(USV)在复杂海洋环境中路径跟随的控制问题,本文构建基于MAVLink的通信系统,实现领航船舶与受控船舶间的实时状态传输,确保受控船舶能够根据领航船舶的实时位置、速度等信息进行动态调整,并利用深度Q网络(Deep Q-Network,DQN)的学习方法使受控船舶能够自主学习最优的航行路径,从而提升跟随精度。在通信不稳定的条件下,采用反步控制(Backstepping Control,BC)进行状态预测并实时反馈补偿,从而确保受控船舶能够平稳跟随领航船舶,修正由于数据丢失造成的路径误差。结果表明,该方法在高干扰环境下,尤其在通信延迟和数据包丢失的情况下,仍能维持良好的路径跟随性能。与传统的控制方法相比,基于DQN和BC的混合控制策略显著提高了无人水面船舶的跟随精度和系统稳定性,具有较强的鲁棒性,能够在复杂和动态变化的海洋环境中有效运行。 展开更多
关键词 无人水面船 路径跟随 深度q网络 反步控制 抗干扰 MAVLink协议
在线阅读 下载PDF
彩虹深度Q网络联合二分法的有源-无源干扰策略优化方法
6
作者 杨佳瑞 王丽洋 +4 位作者 张奇正 仲秦 岑熙 许朵 李亚超 《雷达学报(中英文)》 北大核心 2026年第1期331-344,共14页
智能干扰决策技术的发展,显著提升了敏感目标在战场中的生存对抗能力。然而,现有干扰决策算法仅考虑有源干扰,忽略了无源干扰策略优化问题,严重限制了干扰决策对抗模型的应用场景。针对这一缺陷,该文基于彩虹深度Q网络(Rainbow DQN)与... 智能干扰决策技术的发展,显著提升了敏感目标在战场中的生存对抗能力。然而,现有干扰决策算法仅考虑有源干扰,忽略了无源干扰策略优化问题,严重限制了干扰决策对抗模型的应用场景。针对这一缺陷,该文基于彩虹深度Q网络(Rainbow DQN)与二分法,构建了一种有源-无源干扰策略联合优化方法,利用Rainbow DQN决策有无源干扰样式序列,并以二分法动态搜索无源干扰最优释放位置;考虑干扰对抗环境的非完全观测性,该文进一步设计了基于雷达波束指向点变化的奖励函数,以准确反馈干扰策略的有效性。通过仿真模拟干扰机-雷达对抗实验,与深度Q网络(DQN)、决策优势分离深度Q网络(Dueling DQN)及双重深度Q网络(Double DQN)3种主流干扰决策模型相比,所提方法的Q值平均提升2.43倍,奖励均值平均提升3.09倍,无源干扰位置决策步数缩短50%以上。实验结果表明,该文所提基于Rainbow DQN与二分法的有源-无源干扰策略联合优化方法,可实现有源干扰与无源干扰联合有效决策,进一步提高了干扰策略决策模型适用性,显著提升了干扰机电子对抗中的价值。 展开更多
关键词 彩虹深度q网络 二分法 有源-无源干扰决策 波束指向点 非完全观测环境
在线阅读 下载PDF
基于UPLC-Q-TOF/MS技术结合网络药理学探讨毕节血红天麻镇静催眠的作用机制
7
作者 代华 侯晓杰 +4 位作者 蒋文雯 周礼杰 牟华刚 侯长周 张建锋 《中药新药与临床药理》 北大核心 2026年第1期82-94,共13页
目的采用超高效液相色谱-质谱联用(UPLC-Q-TOF/MS)技术结合网络药理学及分子对接技术探究毕节血红天麻镇静催眠的药效物质基础。方法以天麻素、腺苷和对羟基苯甲醛为考察指标,结合药物提取率,筛选毕节血红天麻的最佳提取工艺。采用UPLC-... 目的采用超高效液相色谱-质谱联用(UPLC-Q-TOF/MS)技术结合网络药理学及分子对接技术探究毕节血红天麻镇静催眠的药效物质基础。方法以天麻素、腺苷和对羟基苯甲醛为考察指标,结合药物提取率,筛选毕节血红天麻的最佳提取工艺。采用UPLC-Q-TOF/MS技术分析毕节血红天麻的化学成分,并通过与文献、对照品及质谱数据匹配,鉴定毕节血红天麻中的化学成分。运用SwissTargetPrediction数据库对鉴定的毕节血红天麻成分进行靶点预测;采用GeneCard、OMIM和DrugBank数据库检索与失眠症相关的作用靶点,并取二者交集获得毕节血红天麻治疗失眠症的潜在作用靶点。构建“药物-活性成分-疾病靶点”网络及蛋白质-蛋白质互作(PPI)网络,筛选出毕节血红天麻治疗失眠症的核心成分及核心靶点。使用DAVID数据库对潜在作用靶点进行GO功能与KEGG通路富集分析,利用Cytoscape 3.7.1软件构建“药物–活性成分–共同靶点–作用通路”综合网络,并对核心成分及核心靶点进行分子对接验证。结果确定毕节血红天麻的最佳提取工艺为水提取。UPLC-Q-TOF/MS结果显示,毕节血红天麻成分包含有机酸、多糖、酚类及其苷类等多种化合物,共确认有31个主要活性成分。网络药理学筛选出毕节血红天麻治疗失眠症的主要活性成分有腺苷、天麻素、巴利森苷A等;核心靶点有甘油醛-3-磷酸脱氢酶(GAPDH)、丝氨酸/苏氨酸蛋白激酶1(AKT1)、白蛋白(ALB)、肿瘤坏死因子(TNF)、B细胞淋巴瘤2(BCL2)等。毕节血红天麻治疗失眠症的机制与神经活性配体-受体相互作用、环磷酸腺苷(cAMP)信号通路、钙信号通路、血清素能突触等与睡眠调节紧密相关的信号通路有关。分子对接结果显示,核心活性成分和核心靶点有较好的结合活性。结论毕节血红天麻中腺苷、天麻素、巴利森苷A等活性成分是其镇静催眠的潜在药效物质基础,其能够作用于GAPDH、AKT1、ALB、TNF、BCL2等靶点,通过调节cAMP、钙信号通路、血清素能突触等信号通路,发挥治疗失眠症的作用。 展开更多
关键词 血红天麻 失眠症 毕节 UPLC-q-TOF/MS 网络药理学 作用机制
原文传递
Deep Reinforcement Learning Approach for X-rudder AUVs Fault Diagnosis Based on Deep Q-network
8
作者 Chuanfa Chen Xiang Gao +3 位作者 Yueming Li Xuezhi Chen Jian Cao Yinghao Zhang 《哈尔滨工程大学学报(英文版)》 2025年第6期1239-1251,共13页
The rudder mechanism of the X-rudder autonomous underwater cehicle(AUV)is relatively complex,and fault diagnosis capability is an important guarantee for its task execution in complex underwater environments.However,t... The rudder mechanism of the X-rudder autonomous underwater cehicle(AUV)is relatively complex,and fault diagnosis capability is an important guarantee for its task execution in complex underwater environments.However,traditional fault diagnosis methods currently rely on prior knowledge and expert experience,and lack accuracy.In order to improve the autonomy and accuracy of fault diagnosis methods,and overcome the shortcomings of traditional algorithms,this paper proposes an X-steering AUV fault diagnosis model based on the deep reinforcement learning deep Q network(DQN)algorithm,which can learn the relationship between state data and fault types,map raw residual data to corresponding fault patterns,and achieve end-to-end mapping.In addition,to solve the problem of few X-steering fault sample data,Dropout technology is introduced during the model training phase to improve the performance of the DQN algorithm.Experimental results show that the proposed model has improved the convergence speed and comprehensive performance indicators compared to the unimproved DQN algorithm,with precision,recall,F_(1-score),and accuracy reaching up to 100%,98.07%,99.02%,and 98.50% respectively,and the model’s accuracy is higher than other machine learning algorithms like back propagation,support vector machine. 展开更多
关键词 Autonomous underwater cehicles X-rudder Fault diagnosis Deep q network Dropout technique
在线阅读 下载PDF
基于UPLC-Q-TOF-MS/MS和特征分子网络深度分析方法的当归贝母苦参丸化学成分研究
9
作者 孙艳 程美玲 +4 位作者 李之煊 王瑞 王颖莉 秦雪梅 刘瑞 《中国新药杂志》 北大核心 2026年第5期500-511,共12页
目的:建立色谱-高分辨质谱结合特征分子网络(feature-based molecular networking,FBMN)深度分析方法,对当归贝母苦参丸的化学成分进行分析与鉴定。方法:先采用超高效液相色谱-四极杆-飞行时间质谱(UPLC-Q-TOF-MS/MS)采集当归贝母苦参... 目的:建立色谱-高分辨质谱结合特征分子网络(feature-based molecular networking,FBMN)深度分析方法,对当归贝母苦参丸的化学成分进行分析与鉴定。方法:先采用超高效液相色谱-四极杆-飞行时间质谱(UPLC-Q-TOF-MS/MS)采集当归贝母苦参丸正、负离子模式下的色谱-质谱数据,之后将所得数据通过全球天然产物社会分子网络平台构建FBMN,并借助Cytoscape 3.10.2软件构建可视化分子网络。根据对照品、自建数据库和公共数据库及文献比对,注释FBMN中的已知节点,并结合保留时间、MS/MS数据等信息识别和排除网络中的冗余节点以提高已知节点标注的准确性,进而根据网络关系和MS/MS数据推测与其相邻的未知节点结构。结果:在剔除黄酮类和苯酞类化合物分子簇中的冗余节点后,由当归贝母苦参丸中鉴定/推测出208个化合物,包括黄酮类成分84个、苯酞类成分34个、生物碱类成分61个、香豆素及有机酸等其他类成分29个。结论:液质联用技术结合FBMN深度分析方法可有效减少分子网络中节点识别的假阳性,进而快速、系统和准确地阐明当归贝母苦参丸的化学成分,为进一步研究其药效物质基础提供参考。 展开更多
关键词 当归贝母苦参丸 超高效液相色谱-四极杆-飞行时间质谱 特征分子网络 分子网络深度分析 冗余节点 化学成分
原文传递
基于UHPLC-Q-Exactive-MS与网络药理学探讨芩柏软膏外用治疗银屑病的作用机制
10
作者 张林华 贾利影 +5 位作者 关佳莉 徐媛媛 拱健婷 丛悦 李萍 韩旭阳 《中国现代中药》 2026年第2期283-292,共10页
目的:采用超高效液相色谱-四极杆-轨道离子阱高分辨质谱法(UHPLC-Q-Exactive-MS)鉴定芩柏软膏的主要化学成分,结合网络药理学和分子对接技术,探讨其治疗银屑病的作用机制。方法:通过质谱数据采集,结合对照品比对、相关文献查阅及数据库... 目的:采用超高效液相色谱-四极杆-轨道离子阱高分辨质谱法(UHPLC-Q-Exactive-MS)鉴定芩柏软膏的主要化学成分,结合网络药理学和分子对接技术,探讨其治疗银屑病的作用机制。方法:通过质谱数据采集,结合对照品比对、相关文献查阅及数据库检索,鉴定并表征芩柏软膏的化学成分;从SwissTargetPrediction数据库获取药物潜在靶点,利用GeneCards、OMIM、TTD、DrugBank数据库筛选银屑病的相关疾病靶点,取两者交集得到共同靶点;借助String数据库和Cytoscape 3.9.1软件构建蛋白质-蛋白质相互作用网络并筛选核心靶点;利用Metascape平台对交集靶点进行基因本体(GO)功能和京都基因与基因组百科全书(KEGG)通路分析,最后通过AutoDock与Pymol软件对预测的靶点及其对应的成分进行分子对接验证。结果:从芩柏软膏中鉴定出50个化合物。筛选得到治疗银屑病的共同靶点180个,其作用机制可能涉及磷脂酰肌醇3-激酶-蛋白激酶B(PI3K-Akt)、丝裂原活化蛋白激酶(MAPK)、缺氧诱导因子-1(HIF-1)信号通路等,肿瘤蛋白p53(TP53)、缺氧诱导因子-1α(HIF1A)、Jun原癌基因(JUN)、信号转导和转录激活因子(STAT3)、B淋巴细胞瘤-2(BCL2)、MAPK1等关键靶点。结论:本研究较全面地分析了芩柏软膏的化学成分,初步推测其可能通过多组分、多靶点、多通路发挥治疗银屑病的作用,为其临床应用及后续实验提供参考。 展开更多
关键词 超高效液相色谱-四极杆-轨道离子阱高分辨质谱法 网络药理学 分子对接 芩柏软膏 银屑病 分子机制 信号通路
暂未订购
融合证候辨识置信度的DQN方剂推荐系统—中医个性化诊疗的动态决策模型
11
作者 郑婉婷 仝媛媛 +1 位作者 柴嘉琪 朱玲 《中国数字医学》 2026年第2期85-94,共10页
目的:针对中医证候辨识主观性强、传统方剂推荐缺乏动态响应的问题,提出一种融合证候预测置信度的深度强化学习决策模型,设计自适应优化的中医个性化诊疗系统。方法:基于5970例临床四诊数据,构建深度神经网络(DNN)证候预测模型,采用SMOT... 目的:针对中医证候辨识主观性强、传统方剂推荐缺乏动态响应的问题,提出一种融合证候预测置信度的深度强化学习决策模型,设计自适应优化的中医个性化诊疗系统。方法:基于5970例临床四诊数据,构建深度神经网络(DNN)证候预测模型,采用SMOTE算法解决证候类别不平衡问题;将证候特征向量及其预测置信度联合构成状态空间,构建深度Q网络(DQN),通过奖励函数动态优化决策策略,激励低置信度状态下的探索,并实现高置信度状态下的精准方剂推荐。结果:DNN证候辨识模型准确率达91.1%(宏F190.9%),显著优于传统方法;置信度驱动的DQN系统实现68.9%的智能方剂选择率,综合评分提升至0.658。结论:“证候置信度-DQN”协同决策范式突破了传统静态方剂推荐的局限性,为中医智能诊疗提供了可量化、自适应的动态决策工具,推动临床实践从经验规则向数据驱动的智能化转型。 展开更多
关键词 中医证候辨识 深度神经网络 深度q网络 个性化方剂推荐
在线阅读 下载PDF
基于UPLC-Q-TOF-MS/MS分析及网络药理学探讨肠炎宁片治疗溃疡性结肠炎的药效物质基础及作用机制
12
作者 肖隆金 熊豪 +1 位作者 殷玉婷 欧阳辉 《中药新药与临床药理》 北大核心 2026年第1期115-128,共14页
目的基于超高效液相色谱-四极杆-飞行时间质谱(UPLC-Q-TOF-MS/MS)分析及网络药理学探讨肠炎宁片治疗溃疡性结肠炎(UC)的药效物质基础及作用机制。方法采用UPLC-Q-TOF-MS/MS技术鉴定肠炎宁片的主要化学成分及大鼠口服后的入血成分。利用S... 目的基于超高效液相色谱-四极杆-飞行时间质谱(UPLC-Q-TOF-MS/MS)分析及网络药理学探讨肠炎宁片治疗溃疡性结肠炎(UC)的药效物质基础及作用机制。方法采用UPLC-Q-TOF-MS/MS技术鉴定肠炎宁片的主要化学成分及大鼠口服后的入血成分。利用SwissTargetPrediction数据库预测入血原型成分的作用靶点;通过GeneCards、OMIM数据库检索UC疾病相关靶点;对成分预测靶点与疾病相关靶点取交集,得到肠炎宁片治疗UC的潜在效应靶点。运用Cytoscape 3.8.0软件构建“中药-入血原型成分-靶点”相互作用网络,筛选核心活性成分;将潜在效应靶点导入STRING数据库构建蛋白互作(PPI)网络,筛选核心靶点;应用OmicShare在线平台对潜在效应靶点进行GO功能及KEGG通路富集分析;采用AutoDock Vina 1.2.0软件对核心活性成分与核心靶点进行分子对接验证。结果从肠炎宁片中共鉴定出73个化学成分,包括22个黄酮类、27个有机酸类、8个环烯醚萜类、4个苯丙素类、2个鞣质及10个其他类成分。从大鼠血浆中共鉴定出34个入血成分,其中14个为原型成分,20个为代谢产物。共筛选出149个潜在效应靶点;6个核心成分:槲皮素、异鼠李素、山柰酚、七叶内酯、咖啡酸、没食子酸甲酯;5个核心靶点:SRC、STAT3、PIK3CA、PIK3R1及PTK2。潜在效应靶点主要富集在EGFR酪氨酸激酶抑制剂耐药性、内分泌抵抗、HIF-1、PI3K-Akt、ErbB等信号通路。分子对接结果显示入血核心成分与核心靶点具有较好的结合能力。结论肠炎宁片可能通过槲皮素、异鼠李素、山柰酚等关键成分,作用于SRC、STAT3、PIK3CA等核心靶点,调控HIF-1、PI3K/AKT等关键通路,发挥治疗UC的作用。 展开更多
关键词 肠炎宁片 溃疡性结肠炎 化学成分 大鼠 入血成分 超高效液相色谱-四极杆-飞行时间质谱 网络药理学 分子对接 槲皮素 异鼠李素 HIF-1通路 PI3K/AKT通路
原文传递
基于深度Q网络的复杂弯曲管道抢修机器人路径规划
13
作者 陈铁峰 高鹏 王涛 《计算机应用文摘》 2026年第4期256-258,262,共4页
受地质沉降、腐蚀老化及第三方施工破坏等因素影响,管道泄漏风险日益突出。面对内部空间狭窄、曲率突变、焊缝余高等复杂工况,为确保抢修任务的效率与成功率,文章提出一种基于深度Q网络的复杂弯曲管道抢修机器人路径规划方法。首先对复... 受地质沉降、腐蚀老化及第三方施工破坏等因素影响,管道泄漏风险日益突出。面对内部空间狭窄、曲率突变、焊缝余高等复杂工况,为确保抢修任务的效率与成功率,文章提出一种基于深度Q网络的复杂弯曲管道抢修机器人路径规划方法。首先对复杂弯曲管道环境进行建模,明确障碍物、起点、终点及管道路径的空间布局。在此基础上,结合深度Q网络算法设计抢修机器人的学习机制,通过神经网络参数优化、动作策略迭代更新和决策生成,实现任务完成时间的最小化。 展开更多
关键词 路径规划 深度q网络 管道抢修 机器人 管道系统
在线阅读 下载PDF
基于Q学习的无人机自组网智能过滤路由算法
14
作者 吴质彬 谢钧 骆西建 《计算机技术与发展》 2026年第1期1-7,16,共8页
无人机自组网因其动态拓扑和高移动性特点,面临路由时延高、链路不稳定及路由空洞等挑战。传统路由协议难以适应复杂动态环境,而强化学习方法为解决该问题提供了新思路。针对上述问题,提出了一种基于Q学习的智能过滤路由算法。无人机节... 无人机自组网因其动态拓扑和高移动性特点,面临路由时延高、链路不稳定及路由空洞等挑战。传统路由协议难以适应复杂动态环境,而强化学习方法为解决该问题提供了新思路。针对上述问题,提出了一种基于Q学习的智能过滤路由算法。无人机节点通过定期广播HELLO消息进行邻居拓扑感知,并基于链路稳定性、邻居拓扑信息构建状态空间,并引入三维凸包过滤机制压缩状态空间规模,降低Q学习开销。算法的多目标奖励函数综合考虑了单跳时延和链路稳定性设计,实现多目标联合优化;同时结合拓扑信息自适应调整学习率和折扣因子,提升路由策略的环境适应性。此外,提出HELLO消息预学习机制,利用邻居节点携带的最大Q值加速Q表收敛。仿真实验表明,与QRF、QGeo、GPSR等协议相比,该算法在数据包递交率、端到端时延等方面表现更优,有效提升了无人机自组网在动态拓扑环境下的路由性能。 展开更多
关键词 无人机自组网 路由协议 q学习 强化学习 三维凸包
在线阅读 下载PDF
基于深度Q网络的地铁列车速度曲线优化方法研究
15
作者 孔文龙 柏友运 +1 位作者 向国良 范子寅 《计算机测量与控制》 2026年第2期182-188,265,共8页
随着国内地铁运营规模的不断扩大,地铁列车电能消耗过大的问题亟待解决;通过对列控系统的速度曲线进行优化,减小列车运行时因克服阻力做功和制动过程造成的机械能损失,提高牵引能效;在算法层面上,充分利用AI算法和高性能计算设备在处理... 随着国内地铁运营规模的不断扩大,地铁列车电能消耗过大的问题亟待解决;通过对列控系统的速度曲线进行优化,减小列车运行时因克服阻力做功和制动过程造成的机械能损失,提高牵引能效;在算法层面上,充分利用AI算法和高性能计算设备在处理最优化问题方面的优势,提出基于深度Q网络算法的速度曲线优化方法:该方法应用强化学习架构,通过对智能体进行迭代优化,求解出具有节能特性的速度曲线;在Matlab平台上搭建了仿真环境,对传统算法和所提算法的节能效果进行了仿真对比,结果显示,所提算法相比传统算法实现了约5%~7%的节能。 展开更多
关键词 地铁列车 牵引能效 速度曲线 深度q网络 强化学习架构
在线阅读 下载PDF
基于深度Q-learning算法的智能电网管控模型研究
16
作者 王筠 李志鹏 +2 位作者 项旭 张军堂 石雷波 《自动化技术与应用》 2026年第2期54-57,142,共5页
设计基于深度Q-learning算法的智能电网管控模型,将可验证声明(verifiable credential, VC)和分布式数字身份(decentralized identity, DID)作为应用程序身份凭证与软件定义网络(software-defined networking, SDN)控制器,结合动态信任... 设计基于深度Q-learning算法的智能电网管控模型,将可验证声明(verifiable credential, VC)和分布式数字身份(decentralized identity, DID)作为应用程序身份凭证与软件定义网络(software-defined networking, SDN)控制器,结合动态信任评估算法与基于属性的访问控制策略,构建基于区块链的智能电网分布式SDN管控模型。在资源分配、网络拓扑动态变化以及安全威胁不断演变的情况下,实施基于区块链的分布式SDN网络的优化。实验测试结果表明,设计方法在通过深度Q-learning优化模型后累积奖励明显大幅增加,在多种安全性能方面表现出色,能够清除恶意域,确保网络环境的安全。 展开更多
关键词 SDN控制器 分布式SDN网络 深度q-learning算法 区块链 智能电网管控模型
在线阅读 下载PDF
矿井水耦合废弃矿洞复合储能的矿区综合能源系统DQN优化策略
17
作者 杨莹 张鑫 +4 位作者 丁浩洋 赵为光 苏勋文 安佰杰 孟祥萌 《电力需求侧管理》 2026年第2期37-43,共7页
针对矿区废弃资源浪费和规模化储能的迫切需求问题,充分利用矿区废弃地下矿洞空间资源,结合矿井涌水巨大位势落差的储蓄能力及其所蕴含的低焓值地热能量,采用多层级能量回收方式减小资源浪费,将抽水蓄能(pumped-storage power,PSP)、压... 针对矿区废弃资源浪费和规模化储能的迫切需求问题,充分利用矿区废弃地下矿洞空间资源,结合矿井涌水巨大位势落差的储蓄能力及其所蕴含的低焓值地热能量,采用多层级能量回收方式减小资源浪费,将抽水蓄能(pumped-storage power,PSP)、压缩空气储能(compressed air energy storage,CAES)和水源热泵(water source heat pump,WSHP)技术耦合,提出复合储能型矿区综合能源系统架构。为克服传统优化建模方法的局限,将综合能源系统运行优化问题转化为马尔可夫决策过程(markov decision process,MDP),以系统运行净利润、风电消纳和低碳排放为目标,基于深度Q学习网络(deep Q-learning network,DQN)强化学习算法设计矿区综合能源系统优化调度策略。最后利用不同场景进行算例仿真分析,验证了DQN优化策略能够较好解决系统非线性和风电、负荷的不确定性问题,并保障了调度策略的实时响应能力;且提出的系统模型能够有效节约能量,提高储能密度,获得较好的经济和环境效益。 展开更多
关键词 废弃矿洞 压缩空气储能 抽水蓄能 深度q学习网络 综合能源系统
在线阅读 下载PDF
基于Deep Q Networks的机械臂推动和抓握协同控制 被引量:3
18
作者 贺道坤 《现代制造工程》 CSCD 北大核心 2021年第7期23-28,共6页
针对目前机械臂在复杂场景应用不足以及推动和抓握自主协同控制研究不多的现状,发挥深度Q网络(Deep Q Networks)无规则、自主学习优势,提出了一种基于Deep Q Networks的机械臂推动和抓握协同控制方法。通过2个完全卷积网络将场景信息映... 针对目前机械臂在复杂场景应用不足以及推动和抓握自主协同控制研究不多的现状,发挥深度Q网络(Deep Q Networks)无规则、自主学习优势,提出了一种基于Deep Q Networks的机械臂推动和抓握协同控制方法。通过2个完全卷积网络将场景信息映射至推动或抓握动作,经过马尔可夫过程,采取目光长远奖励机制,选取最佳行为函数,实现对复杂场景机械臂推动和抓握动作的自主协同控制。在仿真和真实场景实验中,该方法在复杂场景中能够通过推动和抓握自主协同操控实现对物块的快速抓取,并获得更高的动作效率和抓取成功率。 展开更多
关键词 机械臂 抓握 推动 深度q网络(Deep q networks) 协同控制
在线阅读 下载PDF
基于Deep Q Networks的交通指示灯控制方法 被引量:2
19
作者 颜文胜 吕红兵 《计算机测量与控制》 2021年第6期93-97,共5页
交通指示灯的智能控制是当前智能交通研究中的热点问题;为更加及时有效地自适应动态交通,进一步提升街道路口车流效率,提出了一种基于Deep Q Networks的道路指示灯控制方法;该方法基于道路指示灯控制问题描述,以状态、行动和奖励三要素... 交通指示灯的智能控制是当前智能交通研究中的热点问题;为更加及时有效地自适应动态交通,进一步提升街道路口车流效率,提出了一种基于Deep Q Networks的道路指示灯控制方法;该方法基于道路指示灯控制问题描述,以状态、行动和奖励三要素构建道路指示灯控制的强化学习模型,提出基于Deep Q Networks的道路指示控制方法流程;为检验方法的有效性,以浙江省台州市市府大道与东环大道交叉路口交通数据在SUMO中进行方法比对与仿真实验;实验结果表明,基于Deep Q Networks的交通指示灯控制方法在交通指示等的控制与调度中具有更高的效率和自主性,更有利于改善路口车流的吞吐量,对道路路口车流的驻留时延、队列长度和等待时间等方面的优化具有更好的性能。 展开更多
关键词 道路指示灯 Deep q networks 智能交通 信号控制
在线阅读 下载PDF
基于UPLC-Q-TOF-MS/MS及网络药理学探讨活络效灵丹治疗糖尿病周围神经病变的物质基础研究 被引量:3
20
作者 张喆 李玉琴 +5 位作者 施亚宁 宿树兰 范若颖 尚尔鑫 朱悦 段金廒 《药学学报》 北大核心 2025年第4期1124-1136,共13页
本实验通过超高效液相色谱-四极杆-飞行时间串联质谱(UPLC-Q-TOF-MS/MS)、网络药理学探讨活络效灵丹治疗糖尿病周围神经病变(diabetic peripheral neuropathy,DPN)的物质基础。利用UPLC-Q-TOF-MS/MS技术结合PeakView^(TM)1.2软件、Molec... 本实验通过超高效液相色谱-四极杆-飞行时间串联质谱(UPLC-Q-TOF-MS/MS)、网络药理学探讨活络效灵丹治疗糖尿病周围神经病变(diabetic peripheral neuropathy,DPN)的物质基础。利用UPLC-Q-TOF-MS/MS技术结合PeakView^(TM)1.2软件、Molecule Profiler^(TM)软件分析活络效灵丹的体外成分及正常大鼠与高脂饲料喂养联合小剂量链脲佐菌素注射所致DPN大鼠的入血成分,通过Swiss Target Prediction、GeneCards等数据库筛选成分对应靶点及疾病靶点,利用Venny 2.1平台获得交集靶点,导入STRING平台及Cytoscape 3.10.1软件构建蛋白互作网络及“成分-靶点”网络图分析其核心成分与核心靶点,对核心靶点进行GO和KEGG富集分析。实验获得南京中医药大学实验动物伦理委员会批准(批准号:202310A023)。结果共鉴定出活络效灵丹提取物83个化学成分,包括丹参酮ⅡA等52个萜类、Z-藁本内酯等11个苯酞类、阿魏酸等15个有机酸类及4个香豆素类、1个酚类成分。在正常大鼠血浆中鉴定出15个原型成分与29个代谢产物,在DPN大鼠血浆中鉴定出17个原型成分与32个代谢产物。网络药理学结果显示,3-乙酰基-11-酮基-β-乳香酸、11-酮基-β-乳香酸等5个核心成分可能通过TNF、IL6等27个核心靶点,调节AGE-RAGE、PI3K/Akt等信号通路发挥治疗DPN的作用。本研究通过UPLC-Q-TOF-MS/MS技术分析了活络效灵丹的体内外化学成分及主要化合物的裂解规律,结合网络药理学分析其治疗DPN的核心成分,为阐明活络效灵丹治疗DPN的功效物质基础及作用机制研究提供科学依据。 展开更多
关键词 活络效灵丹 UPLC-q-TOF-MS/MS 网络药理学 糖尿病周围神经病变 化学成分 入血成分
原文传递
上一页 1 2 63 下一页 到第
使用帮助 返回顶部