当前位置:大学毕业论文> 硕士论文>材料浏览

大型方面专科开题报告范文 和大型应用系统性能调优和实践方面专科开题报告范文

主题:大型论文写作 时间:2024-01-26

大型应用系统性能调优和实践,本文是大型方面专科开题报告范文跟系统性能和调优和实践方面学年毕业论文范文.

大型论文参考文献:

大型论文参考文献 经贸实践杂志信息系统项目管理论文翻译理论和实践论文论文查询系统

随着商业银行在服务全球化、运营集中化方面的不断推进,银行业务对信息系统的依赖度也在不断增加.相对于系统的功能问题,系统性能问题往往更具有隐蔽性以及交易高峰时刻突发等特点,一旦发生,其影响范围广,对银行服务连续性造成严重威胁.因此,性能问题一直是银行系统必须要解决的重要课题.本文结合中国银行核心银行系统的调优工作,从了解性能问题产生的机理,逐步形成和完善产品全生命周期的调优方法论,制定了性能设计和性能调优的多方面策略.

一、研究性能问题机理,开启高效调优之路

性能问题通常与热点资源和应用系统底层技术组件有关.在处理服务请求时会占用一些关键资源,当这些关键资源有限时就会产生竞争.这里所说的资源包括硬件资源(CPU、磁盘和网络等)和软件资源(线程、表、记录和锁等).

银行大型应用系统的服务类型大致分为三类:联机同步(实时)服务、联机异步服务和批量服务.

联机同步服务性能问题的产生主要是底层技术组件对资源竞争引起的排队等待时间造成的.当所需的资源被占满,服务响应时间显著延长,以致大量新发起的服务请求无法得到及时处理,就会出现热点资源瓶颈,进而引起交易堵塞和蔓延.依据被占满的资源情况,热点资源瓶颈可能发生在特定的交易上,也可能发生在大范围的交易上.解决联机同步服务的热点资源问题需要依靠改进设计,如散列资源或改进资源访问方式等方法.引起异步服务和批量服务性能问题的主要因素除并发服务产生了热点资源外,还有底层模块处理效率问题.在联机异步服务和批量服务中,提升效率是性能问题的关键.由于逻辑复杂,处理进程需要运行CPU、操作磁盘进行I/O,即使资源独占,其单位时间内处理的数据量也是有限的.解决处理效率问题除了硬件方面升级外,改进软件设计、优化算法、简化处理逻辑和减少I/O 是重要的手段.

二、全生命周期性能调优

性能调优需要贯穿软件产品全生命周期,可以分为性能设计和调优两个不同阶段(如图1 所示).性能设计贯穿于设计、编码环节,是产品生命周期的第一个阶段;而调优通常是在现有系统和代码基础上所做的改进,属于产品生命周期的后续测试和验证阶段,依托于业务非功能的要求进行深度分析、测试和调优,并形成调优结论报告,作为生产运维监控的依据.性能设计考验的是开发者正向建设的能力,而性能优化考验的是开发者正向验证和反向修复的能力.

在性能问题机理的理论指导下,结合日常工程活动经验,提炼出性能调优需要参考的性能设计规范和性能风险识别点.性能风险点的识别需要参考长期积累的性能容量资产库,包括性能指标设置、性能基线、数据量基线、业务量基线、系统容量信息和辅助分析工具等.同时,在性能调优过程中需要不断地完善和丰富性能容量资产库.

1. 性能调优从需求分析开始

需求分析是软件生命周期的重要阶段,是业务需求向非功能需求转化的过程,而全面合理的非功能提取是保证性能设计和调优顺利进行的基础工作.通过此阶段的介入,与业务需求方深入透彻地分析需求内容,了解业务的时效性、业务发起模式和场景以及业务发起瞬时量和总量,再结合容量量化模型和设计识别规范,形成该需求的初步性能要求报告,作为后续性能设计和调优的依据.

2. 性能设计贯穿整个需求设计和编码

高效运行的系统性能设计是根本,而性能调优是必要的补充.良好的性能设计可以保障系统更安全地运行,缩减后期维护成本,所以在系统生命周期的初期阶段我们更要重视性能设计.设计编码时,需要着重从以下几个方面考虑.

(1)选择正确的运行模式

运行模式从根本上决定了处理效率,在设计之初要结合系统需求、业务时间点等要求选择正确的运行模式(联机同步运行模式、联机异步运行模式或批量运行模式).

(2)分散热点资源设计

从机理研究结论看出,资源是否过热是一个相对概念,是由资源数量、使用效率和并发流量共同决定的.因此性能设计可以从这些方面寻找问题,并使用容量计算模型进行量化计算,采用一些技术手段,如表分区、热点散列等技术手段弱化该类问题.

①识别热点资源.结合需求中单位时间的业务量要求,分析是否会出现单节点资源,或资源数量过少的热点问题,特别是公共资源访问的设计.② 减少资源锁定时间.

SQL 使用不合理,会极大降低资源(表、记录)的使用效率;由于资源锁定时间变长,可能引发资源出现热点.

③简化处理逻辑.复杂的处理会降低资源使用效率,引发资源热点.

④控制并发交易量.并发度过高,使得资源访问请求量过大,可能会引发资源出现热点问题.

⑤合理设置系统参数.设计中存在高热点资源,需要考虑相关系统参数匹配设置.

3. 持续的性能数据跟踪和性能调优

在应用系统开发阶段,虽然面对当时的业务背景和资源环境做到了最好的的性能设计,但随着系统运行生命周期的延续,系统承载的业务种类和规模不断扩大,应用系统需要在有限的资源环境下,不断进行性能调优来保障系统安全、高效地运行.性能后期的调优和性能设计有本质区别,但又相辅相成.

依据性能问题具有隐蔽性、难发现的特点,按照问题处理四部曲:问题的发现、分析、解决和验证,建立如下的性能调优方法论.

(1)定位问题

性能问题的隐蔽性给问题的发现增加了难度.当前我们主要采用有效的性能测试和静态分析工具来发现问题.主要方法论是结合生命周期前期阶段的初步分析和性能设计的特点,依托系统资产库,进行性能测试场景分析、测试数据及测试环境准备和性能测试,并使用性能数据采集工具生成性能数据报表,该报表是发现问题的依据,也是后续调优分析的基础.

(2)分析问题

基于性能测试过程中产生的数据报表,使用系统性能数据解析工具,生成本次性能问题各类指标维度数据,再结合资产库中积累的精细化指标体系,通过专家判断和类别的方法,分析出存在问题的指标数据,从而追索到相关程序和语句,形成问题分析报告.中国银行核心银行系统在上线初期就通过专家分析和经验总结建立了一套完善的性能指标字典,作为系统性能指标对比的基线,每个指标都是一个性能指示灯,提示了问题产生的原因和机理,并随着系统的运行不断积累和完善.

(3)解决和验证问题

依据问题分析报告,了解性能问题发生的原因和程序,再参考设计指南与阶段检查单进行重新设计和修改,对修改完的内容再重新验证.

整个性能调优的过程是需要持续跟踪和不断调整的,一个性能问题的解决又可能发现另外一个性能问题,每次的性能调优可能需要十几次甚至几十次的过程循环.如果把系统运行的数据流转比作河流流入大海,我们需要疏通河水流动过程中的各种沟沟坎坎,从而保证河流的畅行无阻.

三、完备的资产库体系是调优的基石

性能资产库是进行全生命周期调优的重要参考体系,为性能调优提供合理、有效的理论依据和数据参考,如性能指标、数据基线和辅助分析工具等;同时全生命周期调优又是性能资产库的一个重要输入,通过在不断地调优过程中总结经验,完善和丰富性能资产库.

1. 精细化、多维度指标基线的建立

性能指标为定位交易性能问题确定了一个标尺,主要是以性能产生的机理为基础,通过专家分析、经验总结等不断积累而形成,是整个性能测试工作开展的基础.良好的性能指标基线直接影响到性能调优的结果.根据性能指标受环境影响的因素,银行大型应用系统的性能基线可分为硬性指标和动态指标两类.

硬性指标主要是指不受环境因素影响,反映交易性能情况的数据指标,例如:交易使用表个数、访问DML 个数和访问路径分析等.动态指标是指因环境变化而随之变化的指标,例如:交易TPS、交易平均响应时间、平均CPU 消耗、I/O 消耗和各PACKAGE 占比消耗等.两类指标在进行性能调优定位问题时都要关注,但硬性指标主要应用于与生产环境资源差异性较大且资源使用不稳定的单元、组装和功能测试环境性能问题的定位,而动态指标主要用于性能测试阶段和系统投产运行问题的定位.

指标建立需要精细化、多维度.精细化是指尽量把指标设置到能够采集的不同业务场景的最小粒度.多维度是指建立一整套具有层次性、广泛性的多维度基线,其中层次性是指从系统架构到交易再到程序运行的每个环节的层次架构体系,为性能设计和调优提供完整的、关联性的指标依据;广泛性是指不仅涉及到应用系统的性能指标,还需要建立相关运行平台和使用中间件的指标,作为性能调优分析和解决问题的依据.当前核心系统重点指标为:核心系统整体指标、CICS、DB2的系统指标、重点交易指标、重点程序指标、重点数据表指标和I/O 指标等.核心银行系统指标体系如图2所示.

2. 高效的辅助调优分析工具

大型银行系统架构庞大,影响因素复杂,性能指标覆盖范围广泛,传统人工分析不仅效率低下,且较难第一时间发现并定位问题,风险不可控.因此,为提高系统调优分析的全面性、准确性和时效性,高效辅助调优分析工具的开发和使用尤为重要.

在不断探索和积累的过程中,中国银行核心银行系统结合自身的特点,自主研发了一系列专门用于调优数据分析的工具.

(1)数据库访问路径自动化分析工具

在调优过程中发现,核心系统的性能问题往往是由于某些SQL 的访问路径不合理(或因统计数据)造成的.应用程序中的SQL 语句成千上万,为快速准确地定位到访问路径较差的SQL,中国银行自主开发了“访问路径差异分析报表工具”,可自动识别访问路径较差的SQL,帮助性能调优人员快速定位问题.

(2)核心系统批量监控平台

监控平台通过收集核心系统每日批量的执行信息,能够生成批量运行趋势、作业执行关键路径及变化、时间窗口资源消耗排名和波动分析等数据.根据平台提供的信息,可以反映批量功能的容量能力使用情况,为性能调优发现风险点提供量化的数据基础.

(3)交易性能收集数据TRACE 的解析工具

调优的过程需要分析大量的性能指标数据,人工分析效率低下,无法及时发现性能瓶颈.针对此问题,中国银行特别开发了针对性能监控工具采集数据的解析对比工具,可以实现两个不同测试场景的快速解析和比对,形成差异分析报告,提升调优人员发现瓶颈点的效率.

四、专业化调优队伍

为持续提升系统优化的专业化水平,中国银行组建了由多名不同方向的专业人员组成的调优队伍.队伍成员熟悉应用系统架构和部署、交易运行逻辑和各类资源使用情况,同时又熟悉数据库的访问原理,可熟练使用各类性能调优工具、性能指标采集工具和分析工具等,主要负责每个任务的场景分析、调优设计和性能数据分析调优等工作.

专业化的调优队伍能够更全面、更深入地分析系统性能瓶颈,有效地保证了调优的完备性和有效性.

中国银行核心银行系统近几年来以全生命周期性能调优理论为指导,全面开展优化工作,取得显著的成绩.通过应用优化,在核心系统日均整体交易量增加3.3 倍,最高TPS(交易量/ 秒)增长4 倍的情况下,单笔交易的平均响应时间降低了38%,CPU 消耗降低了30%,有效提升了客户使用体验,减少了维护运营成本.

言而总之,本文论述了关于经典大型专业范文可作为系统性能和调优和实践方面的大学硕士与本科毕业论文大型论文开题报告范文和职称论文论文写作参考文献.

分级诊疗模式下大型公立医院持续改进门诊工作实践
姚 峥① 赵国光① 汉业旭① 王香平①【关键词】分级诊疗 公立医院 门诊【摘 要】多年来,大型公立医院承担了对口支援社区卫生服务工作、支农、支边、组建区域医疗联合体……多项任务,并初见成效,为进一步探.

谁偷了你的性能揭秘优盘为何速度不快
U SB3 0优盘普及速度之快,得益于它的低和越来大的容量,但是在日常生活中,我们总觉得优盘用起来没那么快 厂家对主控的性能的限制、闪存寿命的顾虑、成本控制,导致优盘的速度发展并没有出现势如破竹之势,.

铁路信号系统的故障分析和实践应用
【摘要】 通过操控铁路的信号系统保证列车安全行驶,是实现列车有效控制,提高运输安全的重要途径 本文对铁路信号系统的概况及其故障进行简要分析,提出相对的解决方法,旨在为相关人员提供参考与借鉴 【关键词】.

新形势下电力系统员工心理疏导工作实践
陈沛,曲歌(国网河南省电力公司管理培训中心,河南郑州450051)摘要电力系统的高速发展以及对安全生产标准的不断提高对职工队伍的整体素质尤其是心理素质提出越来越高的要求 但是近几年来电力系统中出现了不.

论文大全