基于PAC-Bayes的多目标强化学习A2C算法研究

1

作者 刘翔 金乾坤 《系统仿真学报》 北大核心 2025年第12期3212-3223,共12页

针对多目标强化学习(multi-objective reinforcement learning,MORL)在探索-利用权衡与不确定性建模方面的理论挑战,构建了一种基于PAC-Bayes理论的学习框架MO-PAC。通过引入多目标随机Critic网络与动态偏好机制,对传统A2C架构进行了关... 针对多目标强化学习(multi-objective reinforcement learning,MORL)在探索-利用权衡与不确定性建模方面的理论挑战,构建了一种基于PAC-Bayes理论的学习框架MO-PAC。通过引入多目标随机Critic网络与动态偏好机制,对传统A2C架构进行了关键性扩展,实现了对复杂Pareto前沿的自适应与高效逼近。实验结果表明:在MuJoCo多目标环境中,MO-PAC相比基线算法在超体积指标上平均提升约20%,期望效用指标平均提升约60%,并展现出更优的收敛效率与鲁棒性,验证了其在多目标决策中的理论价值与实际性能优势。MO-PAC框架克服了现有方法在动态权衡及不确定性建模的理论局限,为MORL理论体系提供新的方法论支撑。 展开更多

关键词 多目标优化 多目标强化学习 行动者-批评家算法 不确定性 pac-Bayes理论

原文传递

一种新型PACS系统存储方案设计 被引量：4

2

作者 康晓东 何丕廉 +1 位作者 李志圣 杨淑滢 《计算机工程与应用》 CSCD 北大核心 2007年第12期205-207,共3页

在PACS系统存储应用特征分析的基础上,提出对医学图像实施多层存储的思想,并具体设计了医学图像高速存储中数据替换的方法。

关键词 pacS 高速存储器 算法

在线阅读 下载PDF 职称材料

基于云存储技术的区域PACS初探 被引量：2

3

作者 龚海 钱大雁 +1 位作者 陈国强 许强 《中国医疗设备》 2013年第11期70-72,共3页

本文介绍了云存储的概念,分析了传统存储系统的不足,并详细阐述了基于云存储技术的区域图片存档及通信系统(Picture Archiving and Communication System,PACS)的特点、基本流程及其实现方式,该系统使得网络中不同类型的存储设备可通过... 本文介绍了云存储的概念,分析了传统存储系统的不足,并详细阐述了基于云存储技术的区域图片存档及通信系统(Picture Archiving and Communication System,PACS)的特点、基本流程及其实现方式,该系统使得网络中不同类型的存储设备可通过应用软件协同工作,有效地提高了医疗服务质量。 展开更多

关键词 云存储技术 区域pacS Hash法 管理服务器 存储服务器 数据库

在线阅读 下载PDF 职称材料

JPEG2000压缩算法及其在PACS中的应用 被引量：2

4

作者 夏新 郑西川 《中国医疗设备》 2008年第7期6-8,共3页

本文介绍了JPEG2000的基本原理和算法。通过VC++构建的一个实验平台,在PACS系统中实现了医学图像的JPEG2000的无损压缩算法、图像渐进传输和感兴趣区域编码。

关键词 JPEG2000 压缩算法 pacS 医学图像

在线阅读 下载PDF 职称材料

二维欧氏空间内线性凸区域概念的PAC学习算法 被引量：1

5

作者 许道云 《贵州大学学报（自然科学版）》 2019年第1期1-7,共7页

实例空间X的一个子集规定一个概念,表现为一个函数c:X→{0,1}。给定X上一个分布D,可能近似正确(PAC)学习算法的目的是基于独立同分布样本S,由算法产生一个近似函数hS,以高概率保证它与目标函数c的误差不超过给定误差值。如果存在这样的... 实例空间X的一个子集规定一个概念,表现为一个函数c:X→{0,1}。给定X上一个分布D,可能近似正确(PAC)学习算法的目的是基于独立同分布样本S,由算法产生一个近似函数hS,以高概率保证它与目标函数c的误差不超过给定误差值。如果存在这样的算法其样本复杂性及时间复杂性受多项式界,则认为目标概念可以有效PAC学习。本文讨论二维欧氏空间上有界线性凸区域定义的目标概念的学习理论和方法,证明了有界线性凸区域定义的目标概念是有效PAC可学习的,其方法可以推广到n维欧氏空间上由超平面界定的有界凸区域对应的目标概念学习。 展开更多

关键词 二维欧氏空间 线性凸区域 概念学习 pac算法

在线阅读 下载PDF 职称材料

基于PAC算法的流数据Top-k实时查询 被引量：3

6

作者 杨矫云 郭思伊 李廉 《华中科技大学学报（自然科学版）》 EI CAS CSCD 北大核心 2021年第2期56-61,共6页

针对流数据的Top-k查询问题,为降低对存储容量和处理时间的要求,利用概率近似正确(PAC)原理,提出了一种实时查询算法,通过随机抽样近似地估计流数据中最大的k个数据,并保证误差和可信度均在规定的范围内。该算法设置k个随机独立排序器,... 针对流数据的Top-k查询问题,为降低对存储容量和处理时间的要求,利用概率近似正确(PAC)原理,提出了一种实时查询算法,通过随机抽样近似地估计流数据中最大的k个数据,并保证误差和可信度均在规定的范围内。该算法设置k个随机独立排序器,每个排序器独立地抽取N个数据并返回各自不同的最大值d,然后用这k个最大值排序获得该流数据集合当前的Top-k序列。证明了在给定误差β、可信度γ的条件下,当抽取的样本数量N满足N+1≥log (1-k√γ)/log (1-β)时,所得到的Top-k序列即可满足要求的误差和可信度,样本复杂度仅与误差和可信度有关,与当前数据总量无关。在生成的随机浮点数流数据集上进行了实验验证,在给定误差β=0.01的情况下,当抽样数为450时,Top-1查询(即最大数据查询)可以达到γ=0.992的可信度;当抽样数为700时,Top-10查询可以达到0.992的可信度。 展开更多

关键词 流数据 随机抽样 样本复杂度 Top-k问题 pac算法

原文传递

PAC最优的RMAX-KNN探索算法 被引量：2

7

作者 李超 门昌骞 王文剑 《计算机科学与探索》 CSCD 北大核心 2020年第3期513-526,共14页

探索与利用的均衡是强化学习研究的重点之一。探索帮助智能体进一步了解环境来做出更优决策;而利用帮助智能体根据其自身当前对于环境的认知来做出当前最优决策。目前大多数探索算法只与值函数相关联,不考虑当前智能体对于环境的认知程... 探索与利用的均衡是强化学习研究的重点之一。探索帮助智能体进一步了解环境来做出更优决策;而利用帮助智能体根据其自身当前对于环境的认知来做出当前最优决策。目前大多数探索算法只与值函数相关联,不考虑当前智能体对于环境的认知程度,探索效率极低。针对此问题,提出了一种基于状态空间自适应离散化的RMAX-KNN强化学习算法,算法根据当前智能体对于环境状态空间的离散化程度改写值函数形式,然后基于此值函数对环境进行合理的探索,逐步实现对于环境状态空间的自适应离散化划分。RMAXKNN算法通过将探索与环境状态空间离散化相结合,逐渐加深智能体对于环境的认知程度,进而提高探索效率,同时在理论上证明该算法是一种概率近似正确(PAC)最优探索算法。在Benchmark环境上的仿真实验结果表明,RMAX-KNN算法可以在探索环境的同时实现对于环境状态空间的自适应离散化,并学习到最优策略。 展开更多

关键词 探索与利用的均衡 值函数 状态空间自适应离散化 概率近似正确(pac)最优探索算法

在线阅读 下载PDF 职称材料

基于PAC-ID3融合的电梯液压缓冲器隐患智能识别方法研究 被引量：1

8

作者 梁敏健 刘德阳 《工业仪表与自动化装置》 2021年第5期94-100,共7页

针对传统决策树算法应用于电梯液压缓冲器隐患智能识别准确率有待提高的问题,提出一种改进传统决策树ID3与主成分分析法(PCA)融合的智能识别方法(PAC-ID3)。针对传统ID3算法倾向于选择取值较多的属性缺点,引进属性阈值和信息增益率,对传... 针对传统决策树算法应用于电梯液压缓冲器隐患智能识别准确率有待提高的问题,提出一种改进传统决策树ID3与主成分分析法(PCA)融合的智能识别方法(PAC-ID3)。针对传统ID3算法倾向于选择取值较多的属性缺点,引进属性阈值和信息增益率,对传统ID3算法进行改进优化;样本数集通过主成分分析方法,解决决策树存在多值倾向问题,选出更具有代表性的决策属性,提高决策树的建模效率和准确率;通过对改进优化融合前后算法进行了比较,实验结果表明,改进融合后的算法提高了隐患识别的精确率。 展开更多

关键词 液压缓冲器 ID3算法 主成分分析法 pac-ID3 多值倾向性

在线阅读 下载PDF 职称材料

Boosting理论基础 被引量：5

9

作者 涂承胜 陆玉昌 《计算机科学》 CSCD 北大核心 2004年第10期11-14,共4页

Boosting是提高学习算法准确度的有效方法。本文主要介绍了Boosting的问题框架PAC模型、与Boosting相似并有助于AdaBoost研完的在线分配模型和AdaBoost算法,并对AdaBoost算法的参数和弱假设选择等进行了分析。

关键词 ADABOOST算法 学习算法 在线 分配模型 框架 参数 pac 有效方法 问题 分析

在线阅读 下载PDF 职称材料

一种基于声光可调滤光器-近红外光谱技术建立的心通口服液的分析研究 被引量：4

10

作者 王宁 李进启 +1 位作者 石俊英 蔡绍松 《中草药》 CAS CSCD 北大核心 2009年第1期53-56,共4页

目的应用声光可调滤光器(AOTF)-近红外(NIR)光谱技术和化学计量学方法建立一种用于心通口服液快速定性、定量分析的新方法。方法采用主成分分析(PCA)和偏最小二乘法(PLS1)分别建立心通口服液的定性定量分析模型,并以此进行快速分析。结... 目的应用声光可调滤光器(AOTF)-近红外(NIR)光谱技术和化学计量学方法建立一种用于心通口服液快速定性、定量分析的新方法。方法采用主成分分析(PCA)和偏最小二乘法(PLS1)分别建立心通口服液的定性定量分析模型,并以此进行快速分析。结果建立的心通口服液定性分析模型(XT-C)可正确判断心通口服液;以葛根素为指标成分建立的心通口服液定量分析模型准确性好,葛根素的内部交叉验证均方差是RMSEP=0.1371,决定系数R2=0.9845,经对外部验正集样品进行外部验证,葛根素预测值与真值的相关系数是r2=0.9964,预测值的平均回收率为101.9%,方法精密度RSD为1.98%,稳定性RSD为1.57%。结论该方法是一种简便、快速、低耗的新型分析技术,可用于心通口服液的快速定性定量分析。 展开更多

关键词 心通口服液 声光可调滤光器 主成分分析 偏最小二乘 葛根素

原文传递

为不完全领域理论补充知识的学习方法CE

11

作者 张旗 陆玉昌 石纯一 《计算机学报》 EI CSCD 北大核心 1995年第6期443-449,共7页

本文给出了一个补充解释的学习方法ＣＥ，它是解释学习和归纳学习两种方法的结合，试图解决给不完全的领域理论补充知识的问题．

关键词 不完全领域理论 解释学习 归纳学习 学习方法

在线阅读 下载PDF 职称材料

MRI的DICOM图像方位算法的研究 被引量：1

12

作者 莫小红 吕庆文 《中国医学物理学杂志》 CSCD 2011年第2期2519-2522,共4页

目的:由DICOM图像首行和首列的方向余弦矢量,计算出图像的方位信息。方法:首行首列的方向余弦做叉积运算,得到图像平面的法线方向余弦,进一步分析出来图像的方位信息。结果:建立VC++项目,读取DICOM图像方位余弦数据元素,定性分析图像在... 目的:由DICOM图像首行和首列的方向余弦矢量,计算出图像的方位信息。方法:首行首列的方向余弦做叉积运算,得到图像平面的法线方向余弦,进一步分析出来图像的方位信息。结果:建立VC++项目,读取DICOM图像方位余弦数据元素,定性分析图像在三维坐标系中的图像方位信息。结论:编程实现了DICOM医学图像方位计算,对医学影像诊断和三维重建旋转中的方向定位具有重要的意义。 展开更多

关键词 DICOM pacS 图像方位 方向余弦 叉积算法

在线阅读 下载PDF 职称材料

基于离散变分原理的Birkhoff辛算法

13

作者 龚丽红 张泽 +1 位作者 郑宇 吴非 《科技创新导报》 2013年第19期210-211,共2页

从Pfaff泛函变分的角度出发描述Birkhoff方程,再从变分离散的角度的到离散的Birkhoff方程,进而的到辛流形公式、构造辛算法,最后给出一个算例将其与传统的中点格式进行比较体现离散Birkhoff方程辛算法的优越性。

关键词 Pfaff泛函 离散Birkhoff方程 Birkhoff辛算法

在线阅读 下载PDF 职称材料

PCA变换下超光谱图像自适应降维算法仿真 被引量：4

14

作者 杨峰 《计算机仿真》 北大核心 2019年第8期435-438,444,共5页

图像降维处理在众多领域中受到广泛的应用,作用也日益凸显。针对当前算法图像自适应降维效果差、降维效率低的问题,提出PCA变换下超光谱图像自适应降维算法。将超谱图像的每个波段当作二维矩阵,选取出其中的主成分,对超谱图像翻转,建立... 图像降维处理在众多领域中受到广泛的应用,作用也日益凸显。针对当前算法图像自适应降维效果差、降维效率低的问题,提出PCA变换下超光谱图像自适应降维算法。将超谱图像的每个波段当作二维矩阵,选取出其中的主成分,对超谱图像翻转,建立数据模型,经过变换后,超谱图像可以获得对应的向量,对数据模型做转换;分析超谱图像中的信号和噪声,提取子空间中所有的图像信息,采用一种随机变量的偏度形式对多元数据正态分布检验,可以得到数据样本,在规定的显著水平下,获取到超谱图像的投影子空间;在此基础上,建立超谱图像的样本矩阵,并分析每一行以及每一列向量的个数,计算数据不同维度之间的协方差来求取数据均值,通过构建模式矩阵可以获得超谱图像自适应降维后的矩阵,最终实现了超谱图像的自适应降维。实验结果表明,提出算法对超谱图像自适应降维后所得图像的清晰度较高,并且降维的计算时间较短,得到了降维效果好和降维效率高的结果。 展开更多

关键词 主成分分析变换 超谱图像 自适应 降维算法

在线阅读 下载PDF 职称材料

基于孤立森林算法的铁路通信网潜在攻击检测方法研究 被引量：1

15

作者 董玉圻 《铁道通信信号》 2023年第7期54-59,共6页

针对当前铁路通信网潜在攻击检测方法在识别异常攻击时忽略了对数据的降维处理,导致检测效率偏低、误报率和漏检率较高等问题,提出基于孤立森林算法的铁路通信网潜在攻击检测方法。将铁路通信网样本集通过数据类型划分为多个子集,通过... 针对当前铁路通信网潜在攻击检测方法在识别异常攻击时忽略了对数据的降维处理,导致检测效率偏低、误报率和漏检率较高等问题,提出基于孤立森林算法的铁路通信网潜在攻击检测方法。将铁路通信网样本集通过数据类型划分为多个子集,通过对主成分进行分析,最大限度地减少不同子集间的降维影响,使各子集降维达到最佳;基于降维处理的数据,构建孤立森林潜在攻击检测器,判断数据异常行为;基于孤立森林算法更新铁路通信网潜在攻击检测器,实现铁路通信网潜在攻击检测。仿真试验结果:测试样本数量增加时,该算法的检测速率保持在90%以上,误报率和漏检率均小于等于0.02%,表明该方法在铁路通信网潜在攻击检测上具有一定的应用价值。 展开更多

关键词 铁路通信网 孤立森林算法 潜在攻击 主成分分析法 攻击检测器

在线阅读 下载PDF 职称材料