期刊文献+
共找到34篇文章
< 1 2 >
每页显示 20 50 100
大规模异构数据迁移的自适应清洗与智能转换框架
1
作者 许文静 安宁 +1 位作者 于重 刘珠慧 《网络安全与数据治理》 2025年第9期35-45,共11页
在数字化转型背景下,传统集中式数据库向分布式架构迁移面临异构数据模型语义冲突、业务连续性要求、人工转换低效等核心挑战。提出智能转换框架AUTO-MIG,其核心创新在于深度挖掘数据内在关联的智能决策机制与适应大规模异构环境的高效... 在数字化转型背景下,传统集中式数据库向分布式架构迁移面临异构数据模型语义冲突、业务连续性要求、人工转换低效等核心挑战。提出智能转换框架AUTO-MIG,其核心创新在于深度挖掘数据内在关联的智能决策机制与适应大规模异构环境的高效执行引擎。AUTO-MIG创新性地利用图神经网络自动发现隐含于数据库模式中的复杂表间关联,并结合多目标优化模型智能决策最优存储方案,提升跨模型转换的自动化程度。同时,框架设计独特的双模式日志捕获与流批协同清洗管道,实现对海量历史数据与高频实时变更数据的低延迟、高可靠同步与清洗。该框架成功实现了在容器化平台上的部署并以大规模教育培训系统数据迁移为典型应用案例实践验证。结果表明其图神经网络驱动的关联发现显著提升了复杂查询性能,而双模式协同执行引擎则大幅缩短了迁移总耗时并优化了资源利用效率,为企业数字化转型提供了可靠的技术支撑和实践路径。 展开更多
关键词 异构数据 数据迁移 智能转换框架 元数据感知 图神经网络
在线阅读 下载PDF
一种标准的ETL的设计思想及其实现 被引量:14
2
作者 程跟上 郑洪源 丁秋林 《计算机应用研究》 CSCD 北大核心 2005年第3期101-103,共3页
元数据在数据仓库系统中占据着十分重要的地位,其中存放着许多重要的信息,尤其是对于数据仓库的ETL过程,可以说是ETL的指挥中心。提出了以CWM元数据模型标准为基础来开发标准的ETL的设计思想,并描述了具体的开发步骤。
关键词 ETL CWM 抽取元数据 转换元数据 加载元数据
在线阅读 下载PDF
基于元数据的数据整合平台 被引量:8
3
作者 林毅 宁洪 +1 位作者 王挺 刘文杰 《计算机应用》 CSCD 北大核心 2008年第S2期209-212,共4页
针对数据资源整合的共性问题,提出了一种基于元数据、结合Web服务与本体技术的数据资源共享与整合平台的实现框架(MDDI)。重点讨论了基于JavaCC设计与实现的元数据自动抽取与转换工具,该工具把与各平台相关的元数据自动提取并转换为与... 针对数据资源整合的共性问题,提出了一种基于元数据、结合Web服务与本体技术的数据资源共享与整合平台的实现框架(MDDI)。重点讨论了基于JavaCC设计与实现的元数据自动抽取与转换工具,该工具把与各平台相关的元数据自动提取并转换为与平台无关的元数据,实现了基于元模型的元数据集成,为最终实现数据的共享和整合奠定了基础。 展开更多
关键词 元数据 数据整合 抽取 转换
在线阅读 下载PDF
基于CWM的标准ETL的设计与实现 被引量:10
4
作者 郑洪源 周良 《吉林大学学报(信息科学版)》 CAS 2006年第1期50-55,共6页
目前开发ETL(Etract Transform Load)系统过程中,最典型的问题就是元数据管理混乱,在分析ETL和元数据之间关系的基础上,提出了一种基于公共仓库模型开发的标准ETL系统设计思想,给出了该标准ETL系统的实现过程。将该方法应用于某医疗保... 目前开发ETL(Etract Transform Load)系统过程中,最典型的问题就是元数据管理混乱,在分析ETL和元数据之间关系的基础上,提出了一种基于公共仓库模型开发的标准ETL系统设计思想,给出了该标准ETL系统的实现过程。将该方法应用于某医疗保险系统的ETL开发过程中,结果表明,与传统的ETL开发过程相比,该系统开发效率提高40%以上,系统具有良好的通用性和易集成性,解决了元数据管理混乱的问题。 展开更多
关键词 数据抽取转换加载 公共仓库模型 抽取元数据 转换元数据 加载元数据
在线阅读 下载PDF
试论MARC元数据向DC都柏林核心元数据的转换 被引量:3
5
作者 李鹏云 陈奕 《新世纪图书馆》 2005年第2期59-61,共3页
论文论述了MARC元数据向DC元数据转换的必要性和可行性,介绍了国内外在这方面的 研究现状,并对其技术实现作出展望。
关键词 MARC元数据 都柏林核心元数据 DC 元数据转换 研究现状 技术实现 可行性 国内外
在线阅读 下载PDF
有关CNMARC与DC元数据之间的对应转换 被引量:2
6
作者 刘圆圆 刘军华 《图书与情报》 CSSCI 2007年第3期103-106,共4页
文章概述了CNMARC的缺陷和DC的优势,提出CNMARC向DC转换的必要性,详细列出DC元素与CNMARC各字段的映射和匹配关系,同时介绍了CNMARC与DC的转换方式,分析了目前我国在CNMARC与DC转换中存在的问题。
关键词 DC CNMARC 元数据转换
在线阅读 下载PDF
Use of Service Middleware Based on ECHO with CSW for Discovery and Registry of MODIS Data 被引量:2
7
作者 CHEN Zeqiang CHEN Nengcheng 《Geo-Spatial Information Science》 2010年第3期191-200,共10页
Nowadays, NASA is producing several terabytes Moderate Resolution Imaging Spectroradiometer (MODIS) data everyday; how to find the data with criteria, such as specific times, locations, and scales using an internati... Nowadays, NASA is producing several terabytes Moderate Resolution Imaging Spectroradiometer (MODIS) data everyday; how to find the data with criteria, such as specific times, locations, and scales using an international standard becomes more and more important. In this paper, a service-oriented architecture for use of the integration Earth Observation System Clearing- HOuse (ECHO) with the Open Geospatial Consortium (OGC) Catalogue Service--Web profile (CSW) is put forward. The architecture consists of three roles: a service requester (the user), a service provider (the ECHO metadata server), and a service broker (the GeoNetwork CSW and MODIS registry service middleware). The core component-MODIS registry service middleware includes three components: metadata fetcher, metadata transformer, and metadata register. The metadata fetcher is used to fetch metadata from ECHO metadata server; the metadata transformer is responsible for transform metadata from one form to another; the metadata register is in charge of registering ISO19139-based metadata to CSW. A prototype system is designed and implemented by using the service middleware technology and a standard interface and protocol. The feasibility and the response time of registry and retrieval of MODIS data are evaluated by means of a realistic LPDAAC_ECS MODIS data center. The implementation of this prototype system and the experiment show that the architecture and method is feasible and effective. 展开更多
关键词 ECHO GeoNetwork ISO19139 model mapping metadata transform metadata register
原文传递
基于XML的领域异构数据库间的数据转换 被引量:13
8
作者 张雪洁 王志坚 +1 位作者 许峰 李静燕 《计算机与现代化》 2004年第5期71-74,共4页
传统异构数据库间的数据转换工具存在受平台限制、容易产生冗余等不足。可扩展标记语言(XML)提供了描述不同类型数据的标准格式,它建构在Unicode(统一码)之上,提供了对多语种的支持。本文以防汛调度领域为例,提出了一种基于XML元数据描... 传统异构数据库间的数据转换工具存在受平台限制、容易产生冗余等不足。可扩展标记语言(XML)提供了描述不同类型数据的标准格式,它建构在Unicode(统一码)之上,提供了对多语种的支持。本文以防汛调度领域为例,提出了一种基于XML元数据描述的领域异构数据库间数据转换的模型。 展开更多
关键词 异构数据库 数据转换 XML UNICODE 元数据 数据共享
在线阅读 下载PDF
靶丸X射线数字图像的轮廓分析及功率谱评价 被引量:4
9
作者 赵学森 高党忠 +4 位作者 马小军 唐永建 张林 孙涛 董申 《强激光与粒子束》 EI CAS CSCD 北大核心 2010年第12期2925-2929,共5页
针对多层靶丸X射线数字图像的成像原理和轮廓边缘进行了理论分析;推导了由靶丸边缘特征点确定靶丸圆心和半径的精确最小二乘拟合算法;对于不同类型(阶跃状或屋顶状)的靶丸图像边缘,采用均化二阶微分算法或径向吸收强度最小二乘洛伦兹型... 针对多层靶丸X射线数字图像的成像原理和轮廓边缘进行了理论分析;推导了由靶丸边缘特征点确定靶丸圆心和半径的精确最小二乘拟合算法;对于不同类型(阶跃状或屋顶状)的靶丸图像边缘,采用均化二阶微分算法或径向吸收强度最小二乘洛伦兹型拟合寻峰算法获取亚像素精度的靶丸圆周轮廓边缘数据;应用快速傅里叶变换算法对靶丸圆周轮廓数据进行分析,获得了靶丸表面外轮廓或内轮廓模数-功率谱特征曲线。 展开更多
关键词 靶丸 射线数字图像 轮廓分析 功率谱 image X-ray ICF SHELL evaluation power spectrum analysis 快速傅里叶变换算法 最小二乘拟合算法 轮廓边缘 亚像素精度 圆周 寻峰算法 吸收强度 微分算法 图像边缘 特征曲线
在线阅读 下载PDF
基于ETL技术的企业信息集成研究 被引量:5
10
作者 夏榆滨 黄善琦 《微计算机信息》 北大核心 2006年第11X期190-192,共3页
本文研究了数据仓库ETL技术,并将ETL技术运用在企业信息集成过程中。本文以PDM和ERP系统为研究对象,阐述了ETL用于数据集成的方法、过程和集成架构。开发了可视化集成开发ETL工具,利用该工具从PDM系统中获取产品结构数据,实现PDM和ERP... 本文研究了数据仓库ETL技术,并将ETL技术运用在企业信息集成过程中。本文以PDM和ERP系统为研究对象,阐述了ETL用于数据集成的方法、过程和集成架构。开发了可视化集成开发ETL工具,利用该工具从PDM系统中获取产品结构数据,实现PDM和ERP系统的数据集成。运用ETL技术能够简化企业信息集成开发,具有低耦合性、易于扩展的特点。 展开更多
关键词 ETL 元模型 数据集成 元数据映射 数据转换
在线阅读 下载PDF
基于元数据驱动的通用数据迁移工具 被引量:10
11
作者 任庆东 李天阳 +1 位作者 袁满 许翰文 《大庆石油学院学报》 CAS 北大核心 2011年第1期76-80,119-120,共5页
为解决企业数据模型升级需要在数据库间实现数据迁移的问题,创建基于元数据驱动的通用数据迁移工具,分析数据抽取、转换和加载体系结构,采用元数据驱动技术,结合企业数据迁移需求,定义数据迁移通用框架模型体系;处理映射模式的元数据表... 为解决企业数据模型升级需要在数据库间实现数据迁移的问题,创建基于元数据驱动的通用数据迁移工具,分析数据抽取、转换和加载体系结构,采用元数据驱动技术,结合企业数据迁移需求,定义数据迁移通用框架模型体系;处理映射模式的元数据表示,实现用元数据描述与存储映射模式.该方法实现用元数据驱动数据抽取、转换和加载引擎功能,技术与功能在中国石油数据中心大型数据迁移中应用,取得良好效果. 展开更多
关键词 数据迁移 元数据驱动 数据抽取、转换和加载体系 映射模式 元数据映射
在线阅读 下载PDF
基于ETL的金融数据集成过程模型 被引量:5
12
作者 苌程 李善平 《计算机工程与设计》 CSCD 北大核心 2010年第9期2070-2072,2104,共4页
为了将频繁产生的分布在世界各地的金融数据按需地高性能集成,提出了基于ETL(extract-transform-load)的金融数据集成过程模型。对规则引擎原理进行了研究,建立了基于业务转换规则的插件式扩展实现可复用可定制的业务转换过程。利用事... 为了将频繁产生的分布在世界各地的金融数据按需地高性能集成,提出了基于ETL(extract-transform-load)的金融数据集成过程模型。对规则引擎原理进行了研究,建立了基于业务转换规则的插件式扩展实现可复用可定制的业务转换过程。利用事件驱动的交互模型和元数据映射保证非结构化和半结构化数据之间无差异集成,采用增量式数据处理解决数据集成中棘手的性能问题。通过实践项目的验证,对比传统数据集成方法和该过程模型,验证了该过程模型的有效性。 展开更多
关键词 数据抽取转换装载 数据集成 元数据映射 业务规则转换 按需交互
在线阅读 下载PDF
常规测井曲线的小波和希尔伯特—黄变换滤波效果分析 被引量:6
13
作者 赵军龙 刘建建 《石油地球物理勘探》 EI CSCD 北大核心 2016年第4期801-808,7,共8页
为了明晰常规测井曲线小波与希尔伯特—黄变换(Hilbert-Huang Transform,HHT)滤波方法效果差异,本文在文献调研基础上,梳理了小波滤波、小波包滤波及HHT滤波的基本思想和方法特点,针对含噪强度为10倍于高斯白噪的自然伽马测井曲线开展... 为了明晰常规测井曲线小波与希尔伯特—黄变换(Hilbert-Huang Transform,HHT)滤波方法效果差异,本文在文献调研基础上,梳理了小波滤波、小波包滤波及HHT滤波的基本思想和方法特点,针对含噪强度为10倍于高斯白噪的自然伽马测井曲线开展了小波阈值滤波、小波包阈值滤波、HHT减性滤波、HHT-WT联合滤波及滤波后信号HHT 3D谱特征分析,并对含有不同噪声强度的自然伽马测井曲线进行了四种滤波结果的均方差、信噪比和相似度对比分析,厘定了滤波效果与噪声强度的关系。研究结果表明:均方差、信噪比、相似度等参数及HHT 3D谱特征均指示四种方法的常规测井曲线滤波效果存在差异;当噪声强度增大时,四种滤波方法效果均下降;噪声强度为中等时,四种滤波方法效果较接近;噪声强度较弱或较强时,小波阈值滤波应为首选滤波去噪方法;HHT-WT联合滤波效果好于HHT减性滤波。 展开更多
关键词 小波变换 希尔伯特—黄变换 常规测井曲线 滤波效果
在线阅读 下载PDF
事务数据向数据仓库转移的方法 被引量:3
14
作者 陈文平 夏红霞 +1 位作者 郑巧仙 李耿 《武汉理工大学学报(信息与管理工程版)》 CAS 2002年第3期87-90,共4页
数据转移是联结事务型数据环境和决策支持环境的纽带 ,对这一技术的研究有着重要意义。从讨论数据转移面临的问题开始 ,逐步就数据抽取、数据净化、数据转换和数据集成等数据转移的重要环节进行深入的探讨 ,给出若干数据转移问题的解决... 数据转移是联结事务型数据环境和决策支持环境的纽带 ,对这一技术的研究有着重要意义。从讨论数据转移面临的问题开始 ,逐步就数据抽取、数据净化、数据转换和数据集成等数据转移的重要环节进行深入的探讨 ,给出若干数据转移问题的解决方法和实现实例。 展开更多
关键词 数据转移 数据抽取 数据净化 数据转换 数据集成 元数据
在线阅读 下载PDF
论基本元数据核心集与MARC互换的可行性 被引量:1
15
作者 梁静 《晋图学刊》 2010年第2期11-16,共6页
当前网络信息资源组织方面最突出的问题就是如何使用元数据合作描述网络资源,解决异构数据库相互转换等问题。本文概述了MARC的缺陷和DC的优势,提出CNMARC向DC转换的必要性,详细列出DC元素与MARC各字段映射关系,同时分析了MARC与DC互换... 当前网络信息资源组织方面最突出的问题就是如何使用元数据合作描述网络资源,解决异构数据库相互转换等问题。本文概述了MARC的缺陷和DC的优势,提出CNMARC向DC转换的必要性,详细列出DC元素与MARC各字段映射关系,同时分析了MARC与DC互换的可行性。 展开更多
关键词 MARC DC 元数据 互换
在线阅读 下载PDF
一种三维土压力盒的工作原理及其应用 被引量:11
16
作者 李顺群 夏锦红 王杏杏 《岩土力学》 EI CAS CSCD 北大核心 2016年第S2期337-342,348,共7页
基于应力理论,设计了一种能测量土中三维应力状态的三维土压力盒,由一个开槽的十二面体基座和6个常规土压力盒组成。根据任一方向上正应力与常规应力表示方法 6个分量之间的关系,建立了三维土压力盒测试数据与常规应力表示方法之间的转... 基于应力理论,设计了一种能测量土中三维应力状态的三维土压力盒,由一个开槽的十二面体基座和6个常规土压力盒组成。根据任一方向上正应力与常规应力表示方法 6个分量之间的关系,建立了三维土压力盒测试数据与常规应力表示方法之间的转换矩阵,给出了由测试数据到常规应力状态的计算方法,并进行了误差分析。考虑基座加工便利性和测试过程的便利性要求,着重阐述了等菱形十二面体三维土压力盒的工作原理、制作过程、测试方法和数据处理等关键环节。对某不饱和重塑土进行了一维压缩,并用测试装置测量了土中6个方向的正应力,推演出了对应的常规应力表达值。结果表明,常规应力表示方法中的两个水平应力基本相等且小于竖向应力,同时水平面和两个竖直面上的剪应力很小,与一维压缩的力学特点吻合,测试装置的设计合理。 展开更多
关键词 三维土压力盒 十二面体 转换矩阵 应力状态表示 误差分析
原文传递
基于模型驱动体系的电子商务应用 被引量:2
17
作者 罗荣良 吴朝晖 刘国良 《计算机应用研究》 CSCD 北大核心 2004年第2期166-168,共3页
将以工商行政管理局和税务局之间的数据交换为例来介绍两个不同的商务领域间模型交换和数据交换的设计,实现了在不同的商务应用程序之间的数据交换和共享。
关键词 模型驱动体系结构 XML元数据交换 平台无关性 数据传输 电子商务
在线阅读 下载PDF
CNMARC与DC的相互转换 被引量:2
18
作者 杨小云 《科技情报开发与经济》 2005年第11期262-263,共2页
CNMARC在规范中文文献数字资源的管理中,起到了十分重要的作用,但随着书目资料与网页的合并,CNMARC的不足和DC明显的优势便显现出来,所以CNMARC和DC的相互转换成为必然。对DC与CNMARC相互转换的研究进展情况及转换方式进行了概述。
关键词 CNMARC DC 元数据 数据转换
在线阅读 下载PDF
网络专题知识库关键技术的研究与实现 被引量:4
19
作者 谈春梅 段卫华 曹松强 《现代图书情报技术》 CSSCI 北大核心 2009年第4期70-74,共5页
使用Visual Studio.NET开发平台,C#程序设计语言,采用XML网页元数据描述框架,对网络专题知识库系统进行设计开发。对该系统的HTML网页元数据采集与XML文件生成、知识点挖掘、网络专题知识XML文件与关系型数据库快速转换等关键技术进行... 使用Visual Studio.NET开发平台,C#程序设计语言,采用XML网页元数据描述框架,对网络专题知识库系统进行设计开发。对该系统的HTML网页元数据采集与XML文件生成、知识点挖掘、网络专题知识XML文件与关系型数据库快速转换等关键技术进行研究与实现。 展开更多
关键词 网络专题知识库 网页元数据采集 知识点挖掘 数据快速转换
在线阅读 下载PDF
井震联合薄储层沉积微相表征实例研究 被引量:26
20
作者 夏竹 李中超 +3 位作者 贾瑞忠 赵师权 熊运斌 张胜 《石油地球物理勘探》 EI CSCD 北大核心 2016年第5期1002-1011,838-839,共10页
油田开发中晚期阶段对薄储层沉积微相精细描述的要求更高,采取井震联合手段、半定量或定量地描述是必然趋势。本研究以地质统计学及平面插值算法为数学工具,分别探讨了井点离散型沉积相数据与连续型砂地比数据的互换关系、地震属性与井... 油田开发中晚期阶段对薄储层沉积微相精细描述的要求更高,采取井震联合手段、半定量或定量地描述是必然趋势。本研究以地质统计学及平面插值算法为数学工具,分别探讨了井点离散型沉积相数据与连续型砂地比数据的互换关系、地震属性与井点砂地比参数的相关性、敏感地震属性的优选等;同时,建立了储层目标砂地比预测模型,并依据模型相关度,选择合适的平面插值算法进行砂地比成图;最后,利用砂地比与薄储层沉积微相的转换模式,结合单井相及沉积背景,获得了相对合理的薄储层单元沉积微相地质成果平面表征图件。通过研究区实际应用与验证,取得了良好的应用效果,也形成了一套较可行的井震联合储层特征精细描述的研究思路与技术流程。 展开更多
关键词 井震联合 薄储层沉积微相 地质统计学 敏感属性优选 平面插值
在线阅读 下载PDF
上一页 1 2 下一页 到第
使用帮助 返回顶部