基于Oracle的数据架构的航空结算系统
欢迎进入Oracle社区论坛,与200万技术人员互动交流 >>进入 2012年4月13日,由IT168(ITPUB、IXPUB、ChinaUnix)主办的2012中国数据库技术大会(DTCC)将在北京隆重召开。本次大会上, OCM联盟发起人侯圣文分享了主题为“航空结算系统基于Oracle的数据架构解
欢迎进入Oracle社区论坛,与200万技术人员互动交流 >>进入
2012年4月13日,由IT168(ITPUB、IXPUB、ChinaUnix)主办的2012中国数据库技术大会(DTCC)将在北京隆重召开。本次大会上, OCM联盟发起人侯圣文分享了主题为“航空结算系统基于Oracle的数据架构解决方案”的精彩演讲。
▲
航空结算系统提供了航空公司与代理人结算的统一方式,更快捷。3天一结算,达到了世界第一的地位。在这个主题中,侯圣文紧密围绕航空结算系统后台数据库的性能调优工作展开。首先分析了Oracle数据库性能对航空结算系统的影响因素,进而发现了系统架构存在的问题及其他性能瓶颈;然后根据Oracle数据库性能优化方向对系统进行调整和测试;进而总结出一套行之有效的数据库优化步骤和方法。从应用设计角度、操作系统层面以及数据库层面分别对系统性能调优策略进行了分析,找出了产生系统性能瓶颈的原因,最终给出航空结算系统的性能优化实施步骤。
航空计算系统分为两块,航空结算系统后台数据库体系结构结合了OLTP与OLAP类型,原有OLTP和OLAP混合部署的数据库进行分库处理,从数据库的安全性和均衡压力方面,OLTP部分采用了Oracle RAC技术构建,优化了SQL代码、内存使用率、数据访问优化、物理存储优化,提升了系统整体的吞吐量。
谈到数据库的性能评估,常用的一些指标包括系统吞吐量(更大的读写性能)、用户响应时间、数据库命中率、CPU使用情况、内存使用情况、磁盘I/O和数据加载时间。
侯圣文进一步分析了数据库性能评估,从数据库性能评估及影响因素的角度出发,对系统进行了全面地分析,找到了系统存在的主要瓶颈,并确定了优化方向,将原有系统分为OLTP和OLAP两种不同类型的数据库,从各自的优化特点出发给出了有真对性的优化方法和实践。建立有效的监控和预防体系结构,深入研究OLTP和OLAP类型数据库的优化调整方法,规范化数据库设计。
影响数据库性能的因素大致有以下方面:
1、 应用程序设计
2、 应用程序SQL编码(Hint的乱用、CBO优化器模式的选择、适时使用绑定变量)
3、 数据库设计(分清OLTP与OLAP系统,有针对性的优化)
4、 数据安全性和可用性(引入RAC技术,)
5、 内存使用率、数据加载、网络流量
整个航空结算系统中具体的优化实践
1、 应用程序SQL代码优化调整:有效的表设计,引入分区表技术
2、 充分使用CPU资源,使用并行特性完成CTAS、使用并行特性完成索引创建以及有效的应用程序设计。在应用程序的设计角度,指定了SQL编写规范,限制了动态SQL。
在应用程序SQL代码优化调整战略上,严格执行SQL计划,创建索引,在RAC中使用反向索引降低索引块争用,为了提高航空计算系统的效率,我们使用到了函数索引提高复杂计算效率,同时会对碎片索引进行重建操作,从而保证了数据的真实性和有效性。
3、系统设计阶段和开发阶段优化效率最高,尽量设定明确的优化目标、创建最少可重复的测试、记录额自动测试、避免常见的错误。
数据库性能优化是一个系统化循序渐进的过程结合本次成功的优化实践经验,侯圣文最后给出了可供参考的数据库优化步骤和方法。从数据库设计优化上,OLTP数据库适应于那些事务性非常高,以短事务以及小的查询为主的数据,采用Cache技术、B-tree索引技术与绑定变量。OLAP数据库适用于长事务、大查询的数据,采用分区技术和并行技术,两者分开设计和优化。更多精彩内容,请查看专题。
▲
推荐阅读
-
基于Oracle的数据架构的航空结算系统
-
基于oracle数据库的生产和测试数据库表结构对比工具 博客分类: 实际应用 springderbyoracle
-
Oracle的系统数据库设计包括容灾、备份
-
基于业务模块组件的系统架构 博客分类: 架构乱弹 OSGI设计模式项目管理框架数据结构
-
基于Flume的美团日志收集系统(一) 博客分类: 大数据架构Flume
-
倪江利:魅族推荐平台的架构演进之路 数据驱动机器学习架构演进推荐系统
-
百度推荐引擎及其背后的大数据架构揭秘 博客分类: 推荐系统人工智能 百度推荐引擎及其背后的大数据架构揭秘推荐系统人工智能
-
深度剖析 | 基于大数据架构的BI应用 博客分类: 综合 大数据数据库电子商务BI
-
JAVAWEB练习——后台商品管理系统,技术点提取(三层架构,数据库的内容显示到前端表格中,增删等操作)
-
只需一条语句即可记住所有的ORACLE的系统表 博客分类: 数据库心得体会 oracle系统表语句 转自:http://wulinhaoxia5.iteye.com/blog/1518677 只需一条语句即可记住所有的ORACLE的系统表