数据网格软件（Gfarm）与计算网格软件（LSF）的集成

论文摘要

网格技术是目前国际上非常活跃的研究领域之一。其大体上可以分为计算网格和数据网格。计算网格面向大计算量的任务,而数据网格则面向数据密集型任务和数据管理。计算网格和数据网格的集成可以为数据密集型作业提供优化的调度策略,使任务和数据的分布更为合理,减少网络带宽和磁盘空间的浪费,提高单个作业的执行效率以及系统的整体性能。本文在LINUX RedHat9.0上基于LSF的插件机制实现了Gfarm1.0.4和LSF6.0 的集成,在一个调度模块中实现了机群系统对数据密集型作业的调度和管理,系统能够作出更为合理的调度决定。新的调度策略缩短了作业的响应时间,减少了系统的使用率,避免了多个作业之间竞争网络带宽,提高了作业的执行效率。且插件机制的使用,避免了新的调度策略影响系统中非Gfarm 应用程序的现有调度策略,而且在对非Gfarm 应用程序进行调度的同时,可以协同利用LSF 的现有调度策略。

论文目录

• 第1章 绪论
• 1.1 网格简介
• 1.2 计算网格
• 1.3 数据网格
• 1.4 本文工作
• 第2章 系统分析与设计
• 2.1 LSF
• 2.2 Gfarm
• 2.3 设计
• 2.3.1 LSF的插件机制
• 2.3.2 Dataaware调度模块的体系结构
• 第3章 系统实现和程序描述
• 3.1 Dataaware调度算法
• 3.2 Gfarm测试程序
• 第4章 系统支撑环境的搭建
• 4.1 系统支撑平台的安装步骤
• 4.2 系统支撑平台搭建及调试
• 第5章 系统性能测试及分析
• 5.1 易用性
• 5.2 安全机制
• 5.3 Gfarm性能测试及分析
• 5.4 无Dataaware调度的性能测试及分析
• 5.5 Dataaware调度性能测试及分析
• 5.6 混合作业对比测试及分析
• 5.7 临界点测试及分析
• 5.8 小结
• 第6章 结论及今后工作
• 6.1 结论
• 6.1.1 本文工作
• 6.1.2 相关工作比较
• 6.2 今后的工作
• 参考文献
• 摘要
• Abstract
• 致谢
• 导师及作者简介