分布式处理架构在商业银行操作数据存储系统中的应用研究

论文摘要

在经济全球化发展的大背景下,开放和竞争已经成为世界金融发展的主流,银行业的全球竞争将日益激烈。商业银行要想在激烈的市场竞争中立于不败之地并持续发展,就需要加快金融创新、科技创新,提高核心竞争力。随着金融信息化建设的不断深入,商业银行信息系统集中化程度越来越高。系统间的数据交换需求也随之越来越高,不但要求高质量,还要求高效率。商业银行操作数据存储系统(Operational Data Store,简称ODS系统)就是为实现此目标而建设的。对海量数据的高效处理是对商业银行操作数据存储系统的挑战,传统式的以“大型机”为中心的集中处理架构所带来的低可扩展性、不灵活性及高成本性已经严重制约着商业银行操作数据存储系统对不断增长的业务的支撑。本文通过分析和研究,提出以分布式处理架构来构建商业银行操作数据存储系统以解决这些问题。首先从网格计算原理分析获得理论支持,再从硬件架构的部署及软件设计方面阐述架构的可行性及实施方法。通过该系统的投产分析,最终证明了分布式处理架构在该领域应用的先进性,为商业银行信息系统在海量数据处理方面探索出一种行之有效的方法。

论文目录

• 摘要
• Abstract
• 第一章 绪论
• 1.1 研究背景及意义
• 1.2 研究现状及存在的问题
• 1.3 研究内容及特色
• 1.4 论文的组织结构
• 第二章 商业银行操作数据存储系统的整体框架设计
• 2.1 商业银行操作数据存储系统需求描述
• 2.2 商业银行操作数据存储系统框架描述
• 2.2.1 数据管理
• 2.2.2 数据流程
• 2.2.3 ETL流程
• 2.2.4 ETL管理
• 2.3 商业银行操作数据存储系统结构分解图
• 2.4 小结
• 第三章 商业银行IDDS系统运行平台的总体设计
• 3.1 传统的商业银行ODS系统平台架构
• 3.2 商业银行ODS系统平台概念图
• 3.3 技术选型
• 3.3.1 ETL工具的功能分析
• 3.3.2 共享存储软件功能分析
• 3.4 商业银行ODS系统运行平台逻辑架构
• 3.4.1 调度Server
• 3.4.2 ETL域
• 3.4.3 数据库及共享存储
• 3.5 商业银行ODS系统运行平台物理架构
• 3.6 系统软件选型
• 3.7 小结
• 第四章 作业调度模块的设计与实现
• 4.1 内部子模块关系图
• 4.2 数据结构设计
• 4.3 处理流程
• 4.4 小结
• 第五章 作业控制模块的设计与实现
• 5.1 作业控制模块的功能分析
• 5.2 作业流（Cycle）的功能设计
• 5.3 作业运行流程设计
• 5.4 数据模型设计
• 5.5 开发环境
• 5.6 结果展示
• 5.7 小结
• 第六章 集成与测试
• 6.1 集成
• 6.2 测试
• 6.2.1 平台功能测试
• 6.2.2 平台性能测试
• 6.3 小结
• 第七章 总结与展望
• 7.1 总结
• 7.2 展望
• 参考文献
• 攻读硕士期间科研成果
• 致谢