基于知识的设计系统开发方法 被引量：7

1

作者 张君媛 黄金陵 庄蔚敏 《农业机械学报》 EI CAS CSCD 北大核心 2002年第6期110-112,共3页

论述了基于知识的工程的基本理论及基于知识的设计系统的原理及先进性 ,详细介绍了系统的开发过程和方法 。

关键词 知识 设计系统 开发方法 应用 计算机设计

在线阅读 下载PDF 职称材料

Hadoop分布式架构下大数据集的并行挖掘 被引量：21

2

作者 吕婉琪 钟诚 +1 位作者 唐印浒 陈志朕 《计算机技术与发展》 2014年第1期22-25,30,共5页

基于Hadoop分布式计算平台,给出一种适用于大数据集的并行挖掘算法。该算法对非结构化的原始大数据集以及中间结果文件进行垂直划分以确保能够获得完整的频繁项集,将各个垂直分块数据分配给不同的Hadoop计算节点进行处理,以减少各个计... 基于Hadoop分布式计算平台,给出一种适用于大数据集的并行挖掘算法。该算法对非结构化的原始大数据集以及中间结果文件进行垂直划分以确保能够获得完整的频繁项集,将各个垂直分块数据分配给不同的Hadoop计算节点进行处理,以减少各个计算节点的存储数据,进而减少各个计算节点执行交集操作的次数,提高并行挖掘效率。实验结果表明,给出的并行挖掘算法解决了大数据集挖掘过程中产生的大量数据通信、中间数据以及执行大量交集操作的问题,算法高效、可扩展。 展开更多

关键词 数据挖掘 大数据集 并行算法 HADOOP

在线阅读 下载PDF 职称材料

基于MapReduce的决策树算法并行化 被引量：19

3

作者 陆秋 程小辉 《计算机应用》 CSCD 北大核心 2012年第9期2463-2465,2469,共4页

针对传统决策树算法不能解决海量数据挖掘以及ID3算法的多值偏向问题,设计和实现了一种基于MapReduce架构的并行决策树分类算法。该算法采用属性相似度作为测试属性的选择标准来避免ID3算法的多值偏向问题,采用MapReduce模型来解决海量... 针对传统决策树算法不能解决海量数据挖掘以及ID3算法的多值偏向问题,设计和实现了一种基于MapReduce架构的并行决策树分类算法。该算法采用属性相似度作为测试属性的选择标准来避免ID3算法的多值偏向问题,采用MapReduce模型来解决海量数据挖掘问题。在用普通PC搭建的Hadoop集群的实验结果表明:基于MapReduce的决策树算法可以处理大规模数据的分类问题,具有较好的可扩展性,在保证分类正确率的情况下能获得接近线性的加速比。 展开更多

关键词 MAPREDUCE 属性相似度 HADOOP 决策树 ID3算法

在线阅读 下载PDF 职称材料

基于机群系统的并行多连接查询优化算法 被引量：2

4

作者 玄萍 李金宝 +1 位作者 郭龙江 何立志 《黑龙江大学自然科学学报》 CAS 北大核心 2006年第6期821-826,831,共7页

多连接查询优化是并行数据库系统的核心问题。已有的研究工作多集中于连接个数较少的情况,不适用于机群系统中的多连接查询优化。在机群环境中,系统的通信带宽是一种瓶颈资源。提出了基于遗传算法的多连接查询优化算法,算法考虑了关系... 多连接查询优化是并行数据库系统的核心问题。已有的研究工作多集中于连接个数较少的情况,不适用于机群系统中的多连接查询优化。在机群环境中,系统的通信带宽是一种瓶颈资源。提出了基于遗传算法的多连接查询优化算法,算法考虑了关系的存储信息和网络的通信代价,有效地利用了机群系统中的资源。实验结果表明,算法具有良好的性能,能够提高多连接查询的执行效率。 展开更多

关键词 遗传算法 并行查询优化 多连接查询 PC机群

在线阅读 下载PDF 职称材料

基于局域网机群系统的并行Monte Carlo仿真环境的建立 被引量：2

5

作者 兰蓉 郑守淇 桂小林 《微电子学与计算机》 CSCD 北大核心 2005年第3期96-98,共3页

利用办公、实验环境中的局域网机群系统及JavaRM I、多线程技术建立并行M onte Carlo仿真平台,为高性能金融分析服务。提出了不同机群系统中仿真任务分配算法及多线程同步控制机制。进行了三种股票期权仿真定价实验。在相同机型机群环境... 利用办公、实验环境中的局域网机群系统及JavaRM I、多线程技术建立并行M onte Carlo仿真平台,为高性能金融分析服务。提出了不同机群系统中仿真任务分配算法及多线程同步控制机制。进行了三种股票期权仿真定价实验。在相同机型机群环境中,实现理想加速状态并具有良好的仿真效果。同时利用Java Servlet技术将股票期权定价算法网上发布,从而提供更广泛的金融在线服务。 展开更多

关键词 MONTE Carlo仿真 JAVARMI 多线程 股票期权定价模型 局域网 机群系统 并行数据库

在线阅读 下载PDF 职称材料

并行实时数据库系统多版本两阶段封锁并发控制协议 被引量：3

6

作者 雷向东 袁晓莉 《中南工业大学学报》 CSCD 北大核心 2003年第3期298-301,共4页

提出了适用于无共享结构并行数据库实时多版本两阶段封锁并发控制协议.该协议具有多版本并发控制机制与两阶段封锁机制的优点,使用如下策略以减少延误截止时间事务数量:若冲突集中有比持锁事务Ti优先级高的事务,且Ti重启动不会延误截止... 提出了适用于无共享结构并行数据库实时多版本两阶段封锁并发控制协议.该协议具有多版本并发控制机制与两阶段封锁机制的优点,使用如下策略以减少延误截止时间事务数量:若冲突集中有比持锁事务Ti优先级高的事务,且Ti重启动不会延误截止时间,则Ti重启动,冲突集中优先级最高的事务获得锁;否则,冲突集中其他事务等待.通过仿真模拟,与HP2PL和OCC TI WAIT 50协议进行比较,结果表明:在正常负载、长短事务混合的情况下,并发控制协议能有效地降低事务延误截止时间率、事务重启动率,减少同步开销,该协议比HP2PL和OCC TI WAIT 50协议性能更好,同时具有较强的扩展性. 展开更多

关键词 并行数据库系统 实时数据库 无共享结构 并发控制 多版本两阶段封锁协议

在线阅读 下载PDF 职称材料

基于机群的并行多连接查询处理机分布算法 被引量：1

7

作者 钟颖莉 玄萍 李金宝 《黑龙江大学自然科学学报》 CAS 北大核心 2009年第2期211-215,共5页

多连接查询优化是并行数据库系统的核心问题。基于机群的并行数据库系统中,网络通信的带宽一直是系统的瓶颈,处理机间的数据交换会大大的增加连接操作执行的时间开销。提出了基于机群的处理机分布算法,在选择分布关系的处理机集合时,充... 多连接查询优化是并行数据库系统的核心问题。基于机群的并行数据库系统中,网络通信的带宽一直是系统的瓶颈,处理机间的数据交换会大大的增加连接操作执行的时间开销。提出了基于机群的处理机分布算法,在选择分布关系的处理机集合时,充分考虑了机群系统中引起数据重分布的因素,减少了额外的通信开销;同时兼顾并行系统中的算子内并行、算子间并行和流水线并行等多种并行,便于开发机群系统的并行性。实验结果表明,该方法具有良好的性能,有助于提高并行多连接查询的执行速度。 展开更多

关键词 机群 多连接查询 流水线并行

在线阅读 下载PDF 职称材料

基于Web Services的校园教学资源共享系统研究与实现 被引量：2

8

作者 杨典华 王树德 《首都师范大学学报（自然科学版）》 2008年第3期19-23,共5页

采用了Web Service技术,综合运用数据库技术和其他信息技术,采取Mediator/Wrapper数据库集成模式,设计了相应的中间应用组件来透明访问异构的教学资源库方案.其研究目的在于解决校园网内部的独立异构资源数据库的访问问题.

关键词 WEB SERVICE 异构数据库 教学资源共享 代理传输

在线阅读 下载PDF 职称材料

基于SN结构的事件流并行数据库加载均衡策略研究 被引量：1

9

作者 刘莹 王启荣 孙凝晖 《计算机研究与发展》 EI CSCD 北大核心 2009年第1期159-166,共8页

倾斜问题是并行系统普遍存在的问题,对系统的性能影响很大.事件流数据库作为数据流应用的后端分析处理系统具有连续大量的事件流加载与用户查询并存的特点,传统的解决数据倾斜的方法无法适应其动态加载的特点.以主干网的网络安全监控应... 倾斜问题是并行系统普遍存在的问题,对系统的性能影响很大.事件流数据库作为数据流应用的后端分析处理系统具有连续大量的事件流加载与用户查询并存的特点,传统的解决数据倾斜的方法无法适应其动态加载的特点.以主干网的网络安全监控应用为研究背景,结合事件流负载特征,针对基于无共享结构的事件流并行数据库提出了一种基于周期计数的能力感知加载均衡策略.该方法在保证加载性能的同时,可以根据加载节点的能力在线自动调解数据分布,不仅有效预防和解决了系统倾斜,还为查询服务的性能奠定了良好的基础.模拟分析和真实测试都证明这种加载均衡策略较其他策略更有效. 展开更多

关键词 倾斜 事件流 并行数据库 负载均衡 加载策略

在线阅读 下载PDF 职称材料

实时数据库的现状及发展趋势 被引量：6

10

作者 赵光煜 赵平 《天津农学院学报》 CAS 2002年第3期50-52,共3页

主要就实时数据库的一些基本问题以及嵌入式实时数据库系统 (ERTDBS)的特性、与传统DBS的区别 ,以及今后值得重视和研究的问题进行探讨。时间是实时系统 (RTS)中的一个主要资源 ,快速性、可预测性和容错性是RTS的重要特征。实时数据库系... 主要就实时数据库的一些基本问题以及嵌入式实时数据库系统 (ERTDBS)的特性、与传统DBS的区别 ,以及今后值得重视和研究的问题进行探讨。时间是实时系统 (RTS)中的一个主要资源 ,快速性、可预测性和容错性是RTS的重要特征。实时数据库系统 (RTDBS)必须提供正确性、及时性和主动性等功能特性。嵌入式实时数据库系统 (ERTDBS)具有定时限制的特性和分布式的特性。对ERTDBS与RTDBS的事务和数据特性进行了比较。 展开更多

关键词 实时数据库 现状 发展趋势

在线阅读 下载PDF 职称材料

PDM在制造业信息化中若干关键技术的应用研究 被引量：3

11

作者 张振国 吴笛 《计算机与数字工程》 2008年第3期119-123,共5页

首先介绍PDM和国内制造企业设计手段的现状,重点研究PDM在实施过程中的关键技术,特别是成组技术,并行工程技术,工作流引擎技术等。

关键词 协同设计 PDM 成组技术 并行工程 工作流引擎

在线阅读 下载PDF 职称材料

实现MATLAB与Excel数据交互的一种可行方法 被引量：5

12

作者 寇金宝 洪林 李德胜 《天津职业大学学报》 2010年第2期93-95,共3页

实际工程设计及数据处理过程中,经常需要在MATLAB环境中读取Excel工作表中的数据。通常的方法是利用Excel Link插件做接口,在两软件之间实现数据交互。而一种更为快捷可行的新方法,对工作表中的数据进行操作时,可不必考虑数据的格式,有... 实际工程设计及数据处理过程中,经常需要在MATLAB环境中读取Excel工作表中的数据。通常的方法是利用Excel Link插件做接口,在两软件之间实现数据交互。而一种更为快捷可行的新方法,对工作表中的数据进行操作时,可不必考虑数据的格式,有利于程序的编制和数据的管理。该方法已用于链传动系统的仿真分析中,验证了数据交互的可行性。 展开更多

关键词 MATLAB EXCEL 数据交互 xlsread xlswrite

在线阅读 下载PDF 职称材料

一致性哈希算法在数据库集群上的拓展应用 被引量：11

13

作者 赵飞 苏忠 《成都信息工程学院学报》 2015年第1期52-58,共7页

在数据库集群的研究中,可扩展性是一个重要的性能指标。为实现在数据高速增长或部分集群服务器故障情况下,数据依然能够快速、可靠、安全的分布到新的集群服务器节点上的目的,就必须合理设置数据划分的策略。将Key-Value存储技术中使用... 在数据库集群的研究中,可扩展性是一个重要的性能指标。为实现在数据高速增长或部分集群服务器故障情况下,数据依然能够快速、可靠、安全的分布到新的集群服务器节点上的目的,就必须合理设置数据划分的策略。将Key-Value存储技术中使用的一致性哈希算法思想借鉴运用到并行分析型数据库集群中,提出针对大规模结构化类特殊数据的一致性哈希划分方法,并在MapReduce框架下设计具体的数据划分方案。最后,以TPC-DS作为测试基准,与同类系统进行性能对比测试,实验结果表明方案不仅有良好的划分性能,且扩展性也较好。 展开更多

关键词 计算机应用技术 数据库 并行分析型数据库集群 一致性哈希算法 数据划分

在线阅读 下载PDF 职称材料

分布式集群并行仿真技术研究 被引量：3

14

作者 李涛 柳林 吴小勇 《微计算机信息》 2010年第25期162-163,152,共3页

本文实现了一种基于局域网的分布式集群并行仿真系统,该系统通过负载均衡、共享内存等技术提高了自身的并行效率和整体性能。本文用该系统对典型战术背景和作战条件下的海军装备体系对抗过程进行大样本仿真实验,结果表明该系统具有很高... 本文实现了一种基于局域网的分布式集群并行仿真系统,该系统通过负载均衡、共享内存等技术提高了自身的并行效率和整体性能。本文用该系统对典型战术背景和作战条件下的海军装备体系对抗过程进行大样本仿真实验,结果表明该系统具有很高的稳定性和并行计算效率,适合大样本海军战术蒙特卡洛仿真的快速计算问题。 展开更多

关键词 并行仿真 集群计算 负载均衡 共享内存

在线阅读 下载PDF 职称材料

无共享并行数据库中结点故障对策

15

作者 昌月楼 阳国贵 《计算机工程》 CAS CSCD 北大核心 1995年第S1期57-61,共5页

介绍了无共享并行数据库中用到的几种结点故障(处理机故障或磁盘故障)处理办法,分析了这几种办法在故障情况下保证数据库可用和负载均衡方面的差别,指出了链式分布(Chained Dcclustering)技术在上述两方面的优势。

关键词 并行处理 数据库 容错 负载均衡

在线阅读 下载PDF 职称材料

基于机群架构的并行数据库实现技术研究 被引量：6

16

作者 柳锴 唐雨新 +1 位作者 张云泉 李玉成 《计算机工程与设计》 CSCD 北大核心 2008年第3期526-529,646,共5页

在总结了现有并行数据库实现模型的基础上,基于"半重写变换"模型[1]实现了一个并行数据库系统的原型。通过对数据划分/重划分、并行选择、并行排序、并行连接等关键操作的实验分析,指出了"半重写变换"模型存在的缺... 在总结了现有并行数据库实现模型的基础上,基于"半重写变换"模型[1]实现了一个并行数据库系统的原型。通过对数据划分/重划分、并行选择、并行排序、并行连接等关键操作的实验分析,指出了"半重写变换"模型存在的缺陷,并提出了一种混合式的改进模型。从理论上说,在机群架构下实现并行数据库系统,这种混合模型较单一模型更有优势。 展开更多

关键词 并行数据库 实现模型 SMP机群 数据划分 并行算法

在线阅读 下载PDF 职称材料

MPI环境下的聚类并行化研究

17

作者 朱映辉 刘波 《电脑开发与应用》 2005年第9期35-36,39,共3页

根据集群的特点和聚类的特性,从理论上探讨了聚类并行化的可行性,并在此基础上用实验进行了验证,结果表明通过这些改进能够获得比较理想的性能。

关键词 聚类 集群 并行化 并行聚类挖掘 MPI MYSQL

在线阅读 下载PDF 职称材料

多媒体数据库检索的一种并行算法

18

作者 房爱东 《宿州师专学报》 2004年第2期99-100,126,共3页

本文描述了并行算法在多媒体数据库中的应用。重点介绍了K-树模型和建立在K-树模型上的一种基于内 容、多特征匹配的多媒体并行检索算法。在K-树模型下,每一多媒体数据类型可被视为一个K维的数据集合,它能 在保证检索精度的情况下显著... 本文描述了并行算法在多媒体数据库中的应用。重点介绍了K-树模型和建立在K-树模型上的一种基于内 容、多特征匹配的多媒体并行检索算法。在K-树模型下,每一多媒体数据类型可被视为一个K维的数据集合,它能 在保证检索精度的情况下显著提高检索速度。通过在Beowulf机群系统上的性能测试验证了该算法的有效性。 展开更多

关键词 并行算法 多媒体数据库 K-树模型 内容索引 多媒体数据近似检索

在线阅读 下载PDF 职称材料

大数据平台下的互联网广告点击率预估模型 被引量：7

19

作者 魏晓航 于重重 +1 位作者 田嫦丽 陈秀新 《计算机工程与设计》 北大核心 2017年第9期2504-2508,共5页

现存的广告点击率预估模型提取的特征维数较多,数据量较大,使得传统平台在应用时压力大,反应时间较长。针对这一问题,提出梯度提升决策树与因子分解机相结合的广告点击率预估模型,将基础特征库里的连续特征离散化,利用梯度提升决策树对... 现存的广告点击率预估模型提取的特征维数较多,数据量较大,使得传统平台在应用时压力大,反应时间较长。针对这一问题,提出梯度提升决策树与因子分解机相结合的广告点击率预估模型,将基础特征库里的连续特征离散化,利用梯度提升决策树对输入特征进行非线性转化,利用Hadoop大数据平台进行分布式训练,高效快速地提取出高层特征,利用因子分解机融合模型解决不均衡分类问题,利用AUC指标对模型进行评估,与常用广告点击率预估模型进行对比。实验结果表明,大数据平台以及并行化的应用使特征提取更加高效,模型解决了分类不均问题,具有更好的广告点击率预估效果。 展开更多

关键词 点击率预估 梯度提升决策树 Hadoop大数据平台 分布式训练 因子分解机

在线阅读 下载PDF 职称材料

实时数据库的关键技术及未来发展前景

20

作者 孔洁 刘杨 《数字技术与应用》 2014年第4期215-216,共2页

作为数据库领域的一个重要分支。实时数据库弱化了关系型数据库的某些功能,通过采用专用的工业实时数据压缩算法以及特殊的历史数据存储索引机制,应对特殊的需求。实时数据库推动了信息化从传统领域向新的领域扩展,向更高层次发展。这... 作为数据库领域的一个重要分支。实时数据库弱化了关系型数据库的某些功能,通过采用专用的工业实时数据压缩算法以及特殊的历史数据存储索引机制,应对特殊的需求。实时数据库推动了信息化从传统领域向新的领域扩展,向更高层次发展。这些新的领域包括生产实时监视、电力调度、交通监视及控制、实时仿真、作战指挥自动化等。展望未来,在物联网领域实时数据库将会发挥更重要的作用。 展开更多

关键词 实时数据库 数据压缩算法 信息化 关系数据库 物联网

在线阅读 下载PDF 职称材料