基于数据网格的海量数据管理若干关键技术研究

基于数据网格的海量数据管理若干关键技术研究

论文题目: 基于数据网格的海量数据管理若干关键技术研究

论文类型: 博士论文

论文专业: 计算机应用技术

作者: 刘丽艳

导师: 李华

关键词: 数字化虚拟人,海量数据,数据网格,元数据,应用平台,远程教育

文献来源: 中国科学院研究生院(计算技术研究所)

发表年度: 2005

论文摘要: 由于信息技术的飞速发展,数据爆炸已成为一个突出的问题,因而海量数据管理技术成为人们关心的热点研究课题。本文以数字化虚拟人为背景,结合国家863高科技研究发展计划课题“数字化虚拟中国人的数据集构建与海量数据库系统”,对海量数据管理技术做了较为深入的研究。主要的工作和成果如下:1、基于数据网格技术的海量数据管理方法数据网格技术是网格的研究方向之一,侧重于数据的存储和管理。以现有的分布式、并行式等数据管理技术为基础,数据网格致力于集成网络中的存储资源、数据资源、计算资源等,建立分布海量数据的一体化数据访问、存储、传输、管理与服务架构,为海量数据的管理提供了一种新的解决方案。本文研究了基于数据网格的海量数据管理,以数字化虚拟人为背景,结合数字人数据集的特点,对存储资源分配、副本管理、高速数据传输、快速数据访问等关键技术进行了探索,并在局域网内建立了一个基于数据网格的数字化虚拟人海量数据管理原型系统。该系统将网络上分布异构的各种资源集成在一起,形成虚拟的存储环境,为上层应用提供统一的访问接口,达到了数据的高度共享。2.元数据模型研究元数据是数据管理技术中一个重要的组成部分。目前大多数据网格元数据研究只关注了文件系统中的数据,而对数据库系统中的数据却很少涉及。针对这一现象,本文提出并建立了一个网格数据库环境下的元数据模型。该模型采用了关系-层次混合模式,统一管理数据库系统以及文件系统中的数据,扩展了数据管理范围。并且通过一次定位即可查询到与数据相关的所有信息,极大地提高了数据访问效率。3.数字化虚拟人应用平台通用结构通过分析数字化虚拟人的应用需求,本文提出了一种应用平台的通用结构。将海量数据管理技术、元数据模型以及中间件技术相结合,建立了基于数据管理的数字化虚拟人应用平台,并将其应用于远程教育,展示了数字人在医学教育方面的应用。同时,该平台也可以推广到其他领域,例如天文学、物理学等等,为这些领域的海量数据管理提供强有力的支持。本文最后对前述工作进行了总结,并提出了下一步的研究方向。

论文目录:

摘 要

Abstract

第一章 绪论

1.1 研究背景

1.2 本文的主要研究内容和意义

1.3 论文内容组织

第二章 海量数据管理技术

2.1 数据管理方式的发展

2.1.1 人工数据管理方式

2.1.2 文件数据管理方式

2.1.3 数据库系统管理方式

2.2 海量数据的产生及特点

2.2.1 海量数据的产生

2.2.2 海量数据的特点

2.3 海量数据管理的需求

2.4 数据网格技术的提出和发展

2.4.1 分布式管理技术

2.4.2 数据网格技术的提出

2.4.3 数据网格的研究现状

2.5 基于数据网格的海量数据管理若干关键技术

2.5.1 元数据技术

2.5.2 存储资源分配

2.5.3 高速数据传输

2.5.4 副本管理

2.5.5 异构数据访问

2.6 本章小结

第三章 数据网格中的元数据模型研究

3.1 研究背景

3.2 网格数据库元数据模型

3.2.1 元数据模型的定义

3.2.2 元数据模型的实现

3.2.3 元数据模型的特点

3.3 元数据模型的应用

3.3.1 应用背景

3.3.2 应用实例

3.3.3 实验结果与分析

3.4 本章小结

第四章 基于数据网格的海量数据管理系统

4.1 系统的目的及设计原则

4.2 系统功能

4.3 系统结构

4.4 基于数据网格的数字化虚拟人海量数据管理系统

4.4.1 关键技术

4.4.2 原型系统

4.4.3 系统特点

4.5 本章小结

第五章 数字化虚拟人应用平台

5.1 数字化虚拟人应用平台的功能要求

5.2 数字化虚拟人应用平台的通用结构

5.3 基于数据管理的数字化虚拟人应用平台

5.3.1 平台结构

5.3.2 关键技术

5.4 应用实例—数字化虚拟人远程教育系统

5.4.1 应用背景

5.4.2 系统功能

5.4.3 系统要求

5.4.4 系统结构

5.4.5 系统实现----关键技术的解决方案

5.4.6 运行实例

5.5 本章小结

第六章 结束语

6.1 本文的主要工作与贡献

6.2 下一步的工作

参考文献

致谢

作者简介

攻读博士学位期间发表的论文

发布时间: 2006-12-27

参考文献

  • [1].基于数据网格的海量数据传输策略研究[D]. 范清风.武汉大学2013
  • [2].数据网格副本管理关键技术研究[D]. 孙海燕.国防科学技术大学2005
  • [3].科学数据网格分布式查询框架及其关键技术研究[D]. 周园春.中国科学院研究生院(计算技术研究所)2006
  • [4].科学数据网格服务发现框架及其关键问题研究[D]. 罗泽.中国科学院研究生院(计算技术研究所)2005
  • [5].数据网格中高可用性副本管理及性能优化研究[D]. 吴长泽.重庆大学2007
  • [6].数据网格的资源管理相关策略及算法研究[D]. 李静.重庆大学2007
  • [7].数据网络环境下的副本管理技术研究[D]. 赵武清.武汉大学2011
  • [8].基于因特网的资源共享模型及关键技术研究[D]. 邢长明.山东师范大学2010
  • [9].数据网格几个关键技术的研究[D]. 姜建华.吉林大学2010
  • [10].数据网格中数据复制的研究[D]. Qaisar Rasool.哈尔滨工业大学2008

相关论文

  • [1].P2P分布存储系统中海量数据的数据一致性维护技术研究[D]. 周婧.国防科学技术大学2007
  • [2].数据网格副本管理关键技术研究[D]. 孙海燕.国防科学技术大学2005
  • [3].面向海量数据的粗糙集理论与方法研究[D]. 王加阳.中南大学2005
  • [4].面向关系型数据共享的数据网格中间件研究[D]. 南凯.中国科学院研究生院(计算技术研究所)2006
  • [5].科学数据网格服务发现框架及其关键问题研究[D]. 罗泽.中国科学院研究生院(计算技术研究所)2005
  • [6].科学数据网格资源调度技术研究[D]. 马永征.中国科学院研究生院(计算技术研究所)2005
  • [7].数据网格的资源管理相关策略及算法研究[D]. 李静.重庆大学2007

标签:;  ;  ;  ;  ;  ;  

基于数据网格的海量数据管理若干关键技术研究
下载Doc文档

猜你喜欢