干扰环境下DQN结合反步控制的无人船路径跟随

1

作者 路春宇 李震 +1 位作者 王楠 王宇轩 《舰船科学技术》 北大核心 2026年第3期145-153,共9页

为了解决无人水面船(USV)在复杂海洋环境中路径跟随的控制问题,本文构建基于MAVLink的通信系统,实现领航船舶与受控船舶间的实时状态传输,确保受控船舶能够根据领航船舶的实时位置、速度等信息进行动态调整,并利用深度Q网络(Deep Q-Netw... 为了解决无人水面船(USV)在复杂海洋环境中路径跟随的控制问题,本文构建基于MAVLink的通信系统,实现领航船舶与受控船舶间的实时状态传输,确保受控船舶能够根据领航船舶的实时位置、速度等信息进行动态调整,并利用深度Q网络(Deep Q-Network,DQN)的学习方法使受控船舶能够自主学习最优的航行路径,从而提升跟随精度。在通信不稳定的条件下,采用反步控制(Backstepping Control,BC)进行状态预测并实时反馈补偿,从而确保受控船舶能够平稳跟随领航船舶,修正由于数据丢失造成的路径误差。结果表明,该方法在高干扰环境下,尤其在通信延迟和数据包丢失的情况下,仍能维持良好的路径跟随性能。与传统的控制方法相比,基于DQN和BC的混合控制策略显著提高了无人水面船舶的跟随精度和系统稳定性,具有较强的鲁棒性,能够在复杂和动态变化的海洋环境中有效运行。 展开更多

关键词 无人水面船 路径跟随 深度q网络 反步控制 抗干扰 MAVLink协议

在线阅读 下载PDF 职称材料

基于Q学习的无人机自组网智能过滤路由算法

2

作者 吴质彬 谢钧 骆西建 《计算机技术与发展》 2026年第1期1-7,16,共8页

无人机自组网因其动态拓扑和高移动性特点,面临路由时延高、链路不稳定及路由空洞等挑战。传统路由协议难以适应复杂动态环境,而强化学习方法为解决该问题提供了新思路。针对上述问题,提出了一种基于Q学习的智能过滤路由算法。无人机节... 无人机自组网因其动态拓扑和高移动性特点,面临路由时延高、链路不稳定及路由空洞等挑战。传统路由协议难以适应复杂动态环境,而强化学习方法为解决该问题提供了新思路。针对上述问题,提出了一种基于Q学习的智能过滤路由算法。无人机节点通过定期广播HELLO消息进行邻居拓扑感知,并基于链路稳定性、邻居拓扑信息构建状态空间,并引入三维凸包过滤机制压缩状态空间规模,降低Q学习开销。算法的多目标奖励函数综合考虑了单跳时延和链路稳定性设计,实现多目标联合优化;同时结合拓扑信息自适应调整学习率和折扣因子,提升路由策略的环境适应性。此外,提出HELLO消息预学习机制,利用邻居节点携带的最大Q值加速Q表收敛。仿真实验表明,与QRF、QGeo、GPSR等协议相比,该算法在数据包递交率、端到端时延等方面表现更优,有效提升了无人机自组网在动态拓扑环境下的路由性能。 展开更多

关键词 无人机自组网 路由协议 q学习 强化学习 三维凸包

在线阅读 下载PDF 职称材料

无线基站通信系统中Q.922协议的优化

3

作者 伏海 姚晓东 《计算机工程与设计》 CSCD 北大核心 2010年第13期2972-2975,共4页

综合考虑了无线基站通信系统高可靠性、高吞吐量、数据链路相对稳定的应用需求,在数据链路层实现Q.922标准协议的基础上,提出了消息发送时的大包分片和滑窗机制,消息确认时的捎带确认机制。前者扩充了Q.922协议发送大消息包的应用场景,... 综合考虑了无线基站通信系统高可靠性、高吞吐量、数据链路相对稳定的应用需求,在数据链路层实现Q.922标准协议的基础上,提出了消息发送时的大包分片和滑窗机制,消息确认时的捎带确认机制。前者扩充了Q.922协议发送大消息包的应用场景,提高系统的稳定性和发送速率;后者提高可靠消息的确认效率。通过Wimax网络基站通信板进行优化性能测试,结果表明了优化的有效性和可行性。 展开更多

关键词 q.922协议 数据链路层 基站通信 大包分片 捎带确认

在线阅读 下载PDF 职称材料

基于双Q学习的多目标优化飞行自组网路由协议 被引量：1

4

作者 黄晨 陈伊捷 李大鹏 《移动通信》 2025年第10期23-30,共8页

为无人机辅助通信设计高效的路由协议面临诸多挑战,包括无人机网络拓扑结构快速变化、电池容量受限以及网络条件动态波动等。现有的基于Q学习的路由协议能够较好地应对这些问题,但仍存在价值函数过度估计的问题,且大多采用固定的Q学习参... 为无人机辅助通信设计高效的路由协议面临诸多挑战,包括无人机网络拓扑结构快速变化、电池容量受限以及网络条件动态波动等。现有的基于Q学习的路由协议能够较好地应对这些问题,但仍存在价值函数过度估计的问题,且大多采用固定的Q学习参数,缺乏对动态环境的适应性。针对上述问题,提出一种基于链路质量和延迟的Q学习路由协议,并引入双Q学习框架和经验回放机制,以提高路由决策的稳定性和网络通信性能。实验结果表明,与现有高性能Q学习路由方案相比,所提出的协议在包投递率和时延控制等性能指标上均取得了显著提升。 展开更多

关键词 无人机自组网 路由协议 双q学习 经验回放机制

在线阅读 下载PDF 职称材料

基于检索增强Text-to-SQL生成的书目搜索对话问答系统研究

5

作者 王震宇 朱学芳 +2 位作者 张君冬 杨睿 刘崧印 《数据分析与知识发现》 北大核心 2025年第11期165-174,共10页

【目的】针对书目搜索场景中自然语言查询难以准确映射为结构化数据库查询的问题,本文构建对话式问答系统并提出改进方法。【方法】该系统采用模型上下文协议实现大语言模型与外部数据库的无缝集成。在此基础上,针对示例驱动的Text-to-... 【目的】针对书目搜索场景中自然语言查询难以准确映射为结构化数据库查询的问题,本文构建对话式问答系统并提出改进方法。【方法】该系统采用模型上下文协议实现大语言模型与外部数据库的无缝集成。在此基础上,针对示例驱动的Text-to-SQL生成易受噪声与领域差异影响的问题,设计了一种基于对比学习的示例选择策略,通过微调文本嵌入模型,使其更关注查询的句法结构与检索意图,从而提升相似度排序质量。实验基于构建的书目搜索语义解析数据集进行,在零样本与少样本条件下对系统性能进行对比验证。【结果】相较于零样本设置,采用本文方法的DeepSeek-V3模型在5-Shot场景下的SQL执行准确率提高了18.5个百分点,验证了该示例选择策略在专业领域Text-to-SQL任务中的有效性。【局限】由于实验数据集覆盖范围有限,系统对跨领域查询的适应性仍需进一步增强。【结论】研究证明了大语言模型结合对比学习示例选择策略在书目智能搜索场景中的有效性,可为其他垂直领域对话问答系统的构建与优化提供参考。 展开更多

关键词 书目搜索 检索增强生成 Text-to-SqL 对话问答系统 模型上下文协议

原文传递

基于Q-learning的广域物联网热点地区MAC层机制设计

6

作者 雷迪 刘向 +4 位作者 孙文彬 杨欣 许茜 陈丽丽 易波 《移动通信》 2025年第8期90-95,共6页

在广域物联网应用中,热点地区由于终端密集接入、业务负载波动大,存在接入冲突频发、信道资源利用率低下等问题。作为共享无线信道管理重要一环,MAC层协议在提升系统吞吐量与接入效率方面发挥着核心作用。分析了热点地区MAC层协议所需特... 在广域物联网应用中,热点地区由于终端密集接入、业务负载波动大,存在接入冲突频发、信道资源利用率低下等问题。作为共享无线信道管理重要一环,MAC层协议在提升系统吞吐量与接入效率方面发挥着核心作用。分析了热点地区MAC层协议所需特征,提出基于Q-learning算法的优化方案,在节点侧引入强化学习模型以实现参数自适应调整。在传统CSMA/CA协议基础上,设计了结合动态RTS/CTS机制与动态退避窗口的接入机制。仿真结果表明,所提出的优化方案在系统吞吐量、平衡信道冲突率与利用率方面有一定提升。 展开更多

关键词 物联网 MAC层协议 CSMA/CA q-LEARNING

在线阅读 下载PDF 职称材料

基于Q-learning分布式训练的无人机自组织网络AODV路由协议

7

作者 孙晨 王宇昆 +1 位作者 万家梅 侯亮 《现代电子技术》 北大核心 2025年第15期103-109,共7页

针对无人机自组织网络节点的高度动态性和拓扑稀疏性,现有的结合Q学习的路由协议暴露出Q值更新滞后、难以迅速适应网络拓扑快速变动的问题,文中提出一种基于Q-learning分布式训练的AODV(DQL-AODV)路由协议。该协议中将每个节点视为一个... 针对无人机自组织网络节点的高度动态性和拓扑稀疏性,现有的结合Q学习的路由协议暴露出Q值更新滞后、难以迅速适应网络拓扑快速变动的问题,文中提出一种基于Q-learning分布式训练的AODV(DQL-AODV)路由协议。该协议中将每个节点视为一个智能体,依据分布式训练的Q值对需转发的数据包进行下一跳选择,每个节点的Q值进行局部更新和全局更新。首先,根据节点间链路的寿命和节点负载能力计算局部奖励值,每次Hello消息接收将更稳定的下一跳链路更新为较高的Q值;其次,路由请求消息到达目标节点后将执行一次全局Q值更新,根据数据包的转发跳数和平均端到端延迟计算全局奖励值;最后,结合Q-learning算法优化Hello消息发送机制,有效地平衡网络拓扑感知程度与路由开销。仿真结果证明,相比于QL-AODV,所提方法在平均端到端时延、数据吞吐量、包到达率和路由开销4个网络性能指标总体上分别优化了19.93%、15.48%、6.24%、11.76%,且收敛能力更强,验证了该协议的有效性。 展开更多

关键词 无人机自组网 AODV路由协议 q-learning分布式训练 链路质量 Hello消息 路由决策

在线阅读 下载PDF 职称材料

基于MQTT的多协议物联网网关设计与实现 被引量：49

8

作者 于海飞 张爱军 《国外电子测量技术》 2019年第11期45-51,共7页

针对现阶段的现场总线和通信协议的共存与竞争,以及物联网环境海量数据和带宽资源紧张的不足,设计并实现了一种基于MQTT(message queuing telemetry transport)协议通信的物联网网关(GW)。通过对多种现场总线协议结构的分析构建了多协... 针对现阶段的现场总线和通信协议的共存与竞争,以及物联网环境海量数据和带宽资源紧张的不足,设计并实现了一种基于MQTT(message queuing telemetry transport)协议通信的物联网网关(GW)。通过对多种现场总线协议结构的分析构建了多协议转换模型,并且应用层基于MQTT事件发布/订阅的消息传输模型,搭建了由感知层节点设备、物联网关到服务器的完整通信链路,实现了网关、服务器和感知层设备的双向通信。利用OpenWrt系统为边缘应用程序提供运行环境,通过网关网络层的网络资源实现云服务器到边缘网关设备的计算或服务的迁移,从而设计并搭建了边缘计算平台。实验测试结果表明:网关的在不同现场总线的工作条件下通信功能良好,基于MQTT协议通信使网络流量带宽下降75.8%,边缘计算平台的数据处理功能正常且程序运行情况正常。所设计网关提高了通用性和数据处理能力、降低了带宽,缓解了网络拥塞和服务器压力。 展开更多

关键词 物联网网关 MqTT协议 协议转换 边缘计算

原文传递

基于Q-learning的自适应链路状态路由协议 被引量：1

9

作者 吴麒 左琳立 +2 位作者 丁建 邢智童 夏士超 《重庆邮电大学学报（自然科学版）》 CSCD 北大核心 2024年第5期945-953,共9页

针对大规模无人机自组网面临的任务需求多样性、电磁环境复杂性、节点高机动性等问题,充分考虑无人机节点高速移动的特点,基于无人机拓扑稳定度和链路通信容量指标设计了一种无人机多点中继(multi-point relay,MPR)选择方法;为了减少网... 针对大规模无人机自组网面临的任务需求多样性、电磁环境复杂性、节点高机动性等问题,充分考虑无人机节点高速移动的特点,基于无人机拓扑稳定度和链路通信容量指标设计了一种无人机多点中继(multi-point relay,MPR)选择方法;为了减少网络路由更新时间,增加无人机自组网路由策略的稳定性和可靠性,提出了一种基于Q-learning的自适应链路状态路由协议(Q-learning based adaptive link state routing,QALSR)。仿真结果表明,所提算法性能指标优于现有的主动路由协议。 展开更多

关键词 无人机自组网 路由协议 强化学习 自适应

在线阅读 下载PDF 职称材料

Q/GDW 376.1规约与DL/T 645规约相互转换的设计与实现 被引量：5

10

作者 刘凯 廖晓群 《电工电能新技术》 CSCD 北大核心 2013年第2期72-75,81,共5页

本文对自动抄表系统的Q/GDW 376.1规约与DL/T 645规约的相互转化进行研究。通过在电能计费装置内添加嵌入式规约转换模块,并依照这两种电力规约对电能数据量和电能计费装置的参变量进行编码,在面向连接的TCP通信和异步串口通信基础上,... 本文对自动抄表系统的Q/GDW 376.1规约与DL/T 645规约的相互转化进行研究。通过在电能计费装置内添加嵌入式规约转换模块,并依照这两种电力规约对电能数据量和电能计费装置的参变量进行编码,在面向连接的TCP通信和异步串口通信基础上,可实现通信规约的相互转换。测试证明,所完成通讯规约互换的软件符合设计要求,具有一定的应用价值。 展开更多

关键词 q GDW 376 1规约 DL645规约 规约转换 自动抄表系统

在线阅读 下载PDF 职称材料

车联网中基于Q学习的地理位置路由协议 被引量：2

11

作者 刘静茹 朱浩 章国安 《电讯技术》 北大核心 2023年第10期1472-1478,共7页

由于道路拓扑结构的限制以及车辆节点的快速变化,车联网路由协议正面临着很多挑战,例如道路的低连通性、较大的延时以及高开销等。为解决此类问题,提出了一种基于Q学习的地理位置路由协议。该协议将地理区域划分成大小一致的正方形,称... 由于道路拓扑结构的限制以及车辆节点的快速变化,车联网路由协议正面临着很多挑战,例如道路的低连通性、较大的延时以及高开销等。为解决此类问题,提出了一种基于Q学习的地理位置路由协议。该协议将地理区域划分成大小一致的正方形,称为网格。在给定目的地的情况下,根据历史交通流信息计算出车辆从当前网格向不同方向的邻居网格移动的Q值,每辆车存储Q值表,通过查询Q值表选择最优下一跳网格。在选定的下一跳网格中,选择距离目的地最近的车辆,当最优下一跳网格中没有邻居车辆时,选择次优下一跳网格中的车辆。仿真结果表明,与其他基于地理位置的路由协议相比,所提协议能够提高分组投递率,降低传输延时并减少通信跳数。 展开更多

关键词 车联网 地理位置路由协议 q学习

在线阅读 下载PDF 职称材料

3D-VANET中基于模糊逻辑和Q学习的拓扑感知路由协议 被引量：4

12

作者 郑泽涛 何荣希 周宇 《电讯技术》 北大核心 2022年第9期1222-1230,共9页

城市三维车载自组网(Three-Dimensional Vehicular Ad-hoc Network, 3D-VANET)中往往存在多种道路形式,每种道路网络拓扑变化特点各异,平面路由协议不能根据道路特点动态调整选路策略,不宜直接用于3D-VANET,为此设计了一种基于模糊逻辑... 城市三维车载自组网(Three-Dimensional Vehicular Ad-hoc Network, 3D-VANET)中往往存在多种道路形式,每种道路网络拓扑变化特点各异,平面路由协议不能根据道路特点动态调整选路策略,不宜直接用于3D-VANET,为此设计了一种基于模糊逻辑和Q学习的拓扑感知路由协议。该协议通过模糊逻辑方法感知网络拓扑变化与网络负载情况动态调整信标间隔,以平衡邻节点信息准确性与控制开销成本。在此基础上,采用Q学习算法对网络建模,根据链路质量以及链路质量变化调整Q学习算法参数,以灵活选择下一跳转发节点,更好适应网络拓扑的频繁变化。仿真结果表明,与对比协议相比,该协议有利于降低控制开销,同时提高包投递率和减少平均端到端时延。 展开更多

关键词 三维车载自组网(3D-VANET) 路由协议 拓扑感知 模糊逻辑 q学习

在线阅读 下载PDF 职称材料

1例肾移植术后Q热血流感染伴肾周脓肿患者抗感染方案分析 被引量：2

13

作者 化霜 方芸 +2 位作者 王霄剑 刘思佳 罗璨 《药学与临床研究》 2024年第4期367-368,共2页

本文报道1例肾移植术后Q热血流感染伴肾周脓肿的病例。结合患者病史特点,临床药师建议多西环素联合亚胺培南西司他汀抗感染治疗。在治疗过程中,临床药师加强对抗菌药物相关不良反应、药物之间相互作用及患者自身肾功能不全等方面的药学... 本文报道1例肾移植术后Q热血流感染伴肾周脓肿的病例。结合患者病史特点,临床药师建议多西环素联合亚胺培南西司他汀抗感染治疗。在治疗过程中,临床药师加强对抗菌药物相关不良反应、药物之间相互作用及患者自身肾功能不全等方面的药学监护,患者体温、炎症指标等均好转,且未出现明显的不良反应。 展开更多

关键词 肾移植 q热 血流感染 肾周脓肿 抗感染方案

暂未订购

基于Q算法的认证协议漏洞挖掘技术研究 被引量：1

14

作者 吕乐乐 董伟 +3 位作者 赵云飞 冯志 李致成 张雅勤 《电子技术应用》 2022年第10期63-68,共6页

认证授权协议在不泄露用户口令的情况下允许第三方获取用户资源,解决了云平台下第三方授权问题,提高了用户的交互体验。但是协议在交互处理中的不确定性和复杂性导致其在实际应用时可能会存在逻辑漏洞。针对该问题提出一种模糊仿真方法... 认证授权协议在不泄露用户口令的情况下允许第三方获取用户资源,解决了云平台下第三方授权问题,提高了用户的交互体验。但是协议在交互处理中的不确定性和复杂性导致其在实际应用时可能会存在逻辑漏洞。针对该问题提出一种模糊仿真方法,通过对协议交互过程进行模糊处理,利用协议实体动作的不确定性,发现协议的逻辑漏洞。同时,结合SA-Q强化学习算法训练智能体学习最优模糊策略,智能化挖掘漏洞。经过测试发现,相比于基本的Q学习算法,该方法的收敛速度提升了9.27%,使得模型在训练时更容易收敛,有效提高了漏洞的挖掘效率。 展开更多

关键词 认证授权协议 逻辑漏洞 模糊仿真 q强化学习算法

在线阅读 下载PDF 职称材料

基于链路质量与节点负载估计的Q学习UANET路由协议 被引量：2

15

作者 王柄焱 郑向平 +1 位作者 贾文杰 李大鹏 《移动通信》 2023年第10期17-23,共7页

针对无人机自组网(UANET)网络拓扑变化频繁,传统路由协议建立链路的稳定性较差,而导致的链路断裂、高负载情况下的业务丢失等问题,提出了基于链路质量与节点负载估计的Q学习UANET路由协议,该协议在最优链路状态路由(OLSR)协议的基础上,... 针对无人机自组网(UANET)网络拓扑变化频繁,传统路由协议建立链路的稳定性较差,而导致的链路断裂、高负载情况下的业务丢失等问题,提出了基于链路质量与节点负载估计的Q学习UANET路由协议,该协议在最优链路状态路由(OLSR)协议的基础上,使用Q-learning算法,将跳数、链路质量和节点负载作为路由决策的奖励函数,以加权的综合评价指标作为路由的决策准则。实验结果表明,改进后的协议更加适用于无人机自组网中高动态、高负载的网络环境。 展开更多

关键词 无人机自组网 路由协议 OLSR q-LEARNING

在线阅读 下载PDF 职称材料

基于Q学习的蚁群优化水声网络协议 被引量：1

16

作者 廖学文 耿烜 《计算机系统应用》 2023年第9期272-279,共8页

针对水声通信中数据传输延时高且动态适应性弱的问题,提出了一种基于Q学习优化的蚁群智能水声网络路由协议(Q-learning ant colony optimization, QACO).协议包括路由行为和智能决策部分,在路发现和维护阶段,依靠网络智能蚂蚁进行网络... 针对水声通信中数据传输延时高且动态适应性弱的问题,提出了一种基于Q学习优化的蚁群智能水声网络路由协议(Q-learning ant colony optimization, QACO).协议包括路由行为和智能决策部分,在路发现和维护阶段,依靠网络智能蚂蚁进行网络拓扑环境的构建和节点之间的信息交换以及网络的维护.在Q学习阶段,通过定量化节点能量和深度以及网络传输延时学习特征作为折扣因子和学习率,以延长网络的生命周期,降低系统能耗和延时.最后通过水声网络环境进行仿真,实验结果表明QACO在能耗、延迟和网络生命周期方面都优于基于Q学习辅助的蚁群算法(Q-learning aided ant colony routing protocol, QLACO)和基于Q-learning的节能和生命周期感知路由协议(Q-learning-based energy-efficient and lifetime-aware routing protocol, QELAR)和基于深度路由协议(depthbased routing, DBR)算法. 展开更多

关键词 路由协议 q学习 蚁群优化 网络自适应 多跳路由 能耗优化 遗传算法 强化学习

在线阅读 下载PDF 职称材料

基于Q⁃learning算法的无人机自组网AODV稳定路由改进方法 被引量：6

17

作者 李海滨 唐晓刚 +3 位作者 常继红 吴署光 周尚辉 王梦阳 《现代电子技术》 2023年第6期91-97,共7页

针对小型无人机集群组网中节点高速移动、网络拓扑变化剧烈导致的网络性能下降问题,在无线自组网按需平面距离向量(AODV)协议基础上,提出一种具有链路稳定度意识的无人机自组网路由协议(LN⁃AODV)。首先,通过加权计算链路维持时间和邻居... 针对小型无人机集群组网中节点高速移动、网络拓扑变化剧烈导致的网络性能下降问题,在无线自组网按需平面距离向量(AODV)协议基础上,提出一种具有链路稳定度意识的无人机自组网路由协议(LN⁃AODV)。首先,通过加权计算链路维持时间和邻居节点变化度,从而选择稳定路径,解决拓扑结构动态变化条件下数据传输延迟和数据成功投递率下降的难题;然后,结合Q⁃learning算法自适应调整Hello消息的发送周期,使协议能够通过感知拓扑变化程度调整路由控制开销和拓扑感知灵敏度。仿真结果表明,相比于AODV,所提方法在端到端延迟、分组投递率、路由开销和数据吞吐量4个网络性能指标上分别提升7.56%,2.58%,17.39%,2.62%,可适应于节点高速运动的无人机自组网,对于无线自组网理论研究及拓展应用具有重要的借鉴意义。 展开更多

关键词 无人机自组网 路由协议 AODV q⁃learning 稳定路径 拓扑感知 Hello报文 邻居节点

在线阅读 下载PDF 职称材料

WSN中融合Q学习和时隙ALOHA的MAC协议

18

作者 陈思 翟岩 张治斌 《控制工程》 CSCD 北大核心 2018年第9期1765-1770,共6页

能耗和延迟是无线传感器网络（WSN）中的介质访问控制（MAC）协议的主要问题,为此在现有时隙ALOHA协议的基础上,提出一种融合Q学习算法的新型MAC协议：QS-ALOHA。设定每个节点在帧中的每个时隙上,都有一个独立的Q值。根据传输结果,利用... 能耗和延迟是无线传感器网络（WSN）中的介质访问控制（MAC）协议的主要问题,为此在现有时隙ALOHA协议的基础上,提出一种融合Q学习算法的新型MAC协议：QS-ALOHA。设定每个节点在帧中的每个时隙上,都有一个独立的Q值。根据传输结果,利用Q学习算法进行更新,并将具有高Q值的时隙优先选择来传输数据,以此减小网络中的传输冲突和数据重发。另外,提出了一种马尔可夫模型,证明了协议中学习过程的收敛性。仿真结果表明,该协议在能量效率、延迟和吞吐量方面具有优越的性能。 展开更多

关键词 无线传感器网络 介质访问控制 q学习算法 时隙ALOHA协议

原文传递

基于Q学习的无线传感器网络路由协议

19

作者 胡健 《计算机与现代化》 2013年第3期131-134,共4页

由于无线传感器网络节点的能量主要消耗在数据的传输上,因此路由选择的有效性决定网络整体能量消耗的高低。本文将网络构建成一个多Agent系统,将系统建模成为一个离散Markov决策过程,使用基于性能势的Q学习算法寻找最优路由。在报酬函... 由于无线传感器网络节点的能量主要消耗在数据的传输上,因此路由选择的有效性决定网络整体能量消耗的高低。本文将网络构建成一个多Agent系统,将系统建模成为一个离散Markov决策过程,使用基于性能势的Q学习算法寻找最优路由。在报酬函数的设定时综合考虑节点距离Sink节点的跳数、邻居节点密度和剩余能量等因素,以达到数据传输最短路径和节点能量消耗的折中。 展开更多

关键词 无线传感器网络 q学习 路由协议 MARKOV决策过程

在线阅读 下载PDF 职称材料

基于Q学习算法的Ad Hoc网络自适应DSR协议研究

20

作者 迟凯 《舰船电子对抗》 2014年第2期115-120,共6页

提出了一种用于Ad Hoc网络改进的基于Q学习算法的自适应动态源路由(DSR)协议。该协议能在网络状态较好的情况下减小开销,在网络状况较差的情况下改善端到端时延和吞吐量性能。仿真结果表明,自适应Q-DSR协议能够提升传统DSR协议的性能,... 提出了一种用于Ad Hoc网络改进的基于Q学习算法的自适应动态源路由(DSR)协议。该协议能在网络状态较好的情况下减小开销,在网络状况较差的情况下改善端到端时延和吞吐量性能。仿真结果表明,自适应Q-DSR协议能够提升传统DSR协议的性能,是简单高效的路由协议。 展开更多

关键词 Ad HOC网络 动态源路由协议 q学习算法 自适应协议

在线阅读 下载PDF 职称材料