运行维护手册模板v1.1

运行维护手册模板VERSION1.1网络运行科2013年11月文档修订 记录 混凝土 养护记录下载土方回填监理旁站记录免费下载集备记录下载集备记录下载集备记录下载 章节编号 章节名称 修订内容简述 修订日期 修订前版本号 XXXXXX系统运行维护手册VersionV1.0编写单位日期【填写说明：蓝色斜体字为说明性文字（其中蓝色粗斜体为应重点关注内容）必须在正式文档去除；暗红色正体为根据实际情况略作修改使用；黑色正体为一般不应做修改，确需修改的内容应与相关部门沟通确认。该段应在正式文档中删除】修订记录 版本号 修订日期 修订说明 修订人 审核人 目录1.生产环境概述 71.1系统简介 71.2逻辑架构图 71.3物理部署图 81.4网络拓扑图 91.5数据架构 111.6服务器 111.7集群 121.8存储 121.8.1存储设备 121.8.2磁盘物理卷/逻辑卷与文件系统对应关系图 131.8.3光纤交换机ZONE的划分图 131.9网络设备 131.10安全设备 131.11其他设备 141.12设备背板图 142.系统接口 142.1关联系统总体概述 142.2文件传输方式 142.3关联系统参数说明 142.4关联系统通讯接口说明 143.应用系统说明 153.1技术架构说明 153.2应用系统各功能模块的说明 153.3目录结构清单 153.4执行程序清单 163.5Shell脚本清单 163.6配置文件清单 163.7交易清单 163.8备份清理策略说明 163.9日志文件清单 173.10应用系统日志详细说明 173.11批处理任务及调度说明 173.12大数据量操作功能说明 173.13系统出错处理 设计 领导形象设计圆作业设计ao工艺污水处理厂设计附属工程施工组织设计清扫机器人结构设计 说明 183.14系统维护设计说明 184.数据库说明 184.1总体说明 184.1.1数据库对象命名规则 184.1.2逻辑主键引入规则 194.1.3相关工具 194.2结构设计 194.2.1数据库表（数据文件）总体结构 194.2.2数据库表（数据文件）关联关系 204.2.3数据库表（数据文件）与功能模块关系 204.2.4数据库表（数据文件）结构设计 214.3其他对象设计 214.3.1序列 214.3.2视图 214.4部署设计 214.4.1数据库部署 224.4.2表空间划分 224.4.3数据结构分布 234.4.4表清理策略 234.4.5分区表策略 234.5安全设计 244.5.1用户管理 244.5.2备份恢复 244.6大数据表相关信息 244.6.1大数据库表或大数据文件的统计更新 244.6.2访问大数据库表或大数据文件的主要交易情况 244.6.3大数据库表或大数据文件的访问情况 255.中间件说明 255.1weblogic信息说明 255.2apache信息说明 255.3其他中间件 256.日常监控 266.1监控指标体系说明 266.2监控方法 266.3监控步骤和时间说明 266.4常见问题处理说明 267.常规维护 267.1日常维护内容综述 267.2日常维护方法 267.3应用启停方法 277.4日常维护步骤和时间说明 278.应急策略 298.1应急数据恢复策略说明 298.2系统应急切换步骤 299.附表 299.1应用系统定义码表 299.2应用系统错误码表 299.3应用系统参数配置表 299.4应用系统通讯参数配置表 309.5维护参数的具体含义和生效条件的说明 3010.系统运维职责分工 3011.密码表 301.生产环境概述1.1系统简介【对系统的背景、功能、服务范围和对象、上线日期、主管部门、开发部门、运行部门等系统概况进行描述】1.2逻辑架构图【用图形和文字描述系统的逻辑架构图。主要包括两方面内容】:1)展现系统包含的各功能模块或子系统及其关系；2)展现系统与其他外部关联系统的关系，这里只是概要描述系统间的关联关系，具体的接口技术描述在后边的“接口设计”部分展开。【关联关系包括但不限于】：1)实时交易报文交换2)批量数据交换3)服务调用例如，银行综合积分系统的逻辑架构图如下:1.3物理部署图【用图形和文字描述物理结构图。应体现系统以下信息】:1)系统部署方式：省级大集中部署，省市两级部署，市级部署；2)各物理主机节点的部署位置及各物理主机之间和外联系统的连接关系；3)系统高可用性配置 方案 气瓶 现场处置方案 .pdf气瓶 现场处置方案 .doc见习基地管理方案.doc关于群访事件的化解方案建筑工地扬尘治理专项方案下载 ,包括HA、RAC、HDR、cluster、主备灾等。例如1.4网络拓扑图【描述系统网络拓扑图，展现系统各主机节点间的网络访问关系】:1)内部各物理节点间及与外围、外联系统间的网络设备及网络连接关系并文字辅助说明:例：2)提供完整的系统网络访问关系表（包含各节点IP信息、部署位置、节点功用、节点间数据访问方向、访问协议及访问端口）。网络访问关系表.xls例： 网络访问关系表 源主机名 部署位置 源IP 目的主机名 部署位置 目的IP 目的端口 端口用途 长连接及超时设置要求 实时还是批量传输 批量传输时间 是否有带保护需求 备注 总行外汇系统服务器（灾备） 亦庄123 11.122.22.22 总行外汇清算系统应用服务器 总行城域网 11.122.22.26/27 TCP/8816/1075/1070 应用接口 长连接断后自动重连 实时 双向 描述：总行外汇清算系统服务器（灾备）通过/8816/1075/1070端口访问总行外汇清算应用服务器.1.5数据架构【对于涉及批量数据传输和处理的系统，在此以数据流图辅以文字说明的方式描述数据的流向和加工过程。对于不涉及批量数据传输和处理的系统，可以跳过此部分】1.6服务器【必需说明该系统所涉及的所有服务器的位置(机房），型号，配置（CPU、内存等），用途，访问IP，操作系统，主机名称，本地存储，外接存储的大小，运行的软件（包括数据库、中间件、应用软件）、业务功能和名称等。】 主机名称 业务用途 IP地址 机柜编号及位置 机器编号 操作系统 运行软件 外接存储 型号和序列号 配置 CXJM-1 应用服务器 10.104.x.xx S04/2-6 xxxx linux Weblogic 无 浪潮英信8560M2212414904 CPU：E7-48204*8@2.00GHz内存：32G本地存储：1200G CXJM-2 应用服务器 10.104.x.xx S04/8-12 xxxx linux Weblogic 无 浪潮英信8560M2212111016 CPU：E7-48204*8@2.00GHz内存：32G本地存储：1200G 1.7集群【如使用服务器集群，请说明每个集群配置：各节点信息，应用包信息（服务IP/共享卷组/启停脚本等），集群运行方式，切换步骤等。】1）集群12）集群…1.8存储1.8.1存储设备【说明使用的存储设备、资源、配置。】1.8.2磁盘物理卷/逻辑卷与文件系统对应关系图【填写下表，说明卷组、逻辑卷、文件系统。根据规划手册的要求，smitlvm，进行相应的设置及其检查】 主机名： 用途： 卷组 卷组名称 存储位置 大小 是否共享 是否镜像 PP大小 逻辑卷 卷组名称 逻辑卷名称 PP数量 挂载点 属主/组 备注 1.8.3光纤交换机ZONE的划分图1.9网络设备【说明网络设备】1）说明该系统使用的内网域名，访问IP。2）（如有）说明该系统使用的公网域名，公网IP。3）如果使用了特定的网络设备，特定的网络配置。请说明。1.10安全设备【如果该系统需要接受Internet或其他非安全外部网络访问，需要描述采用的安全设备、策略,如有防火墙映射IP/Port必须说明；】1.11其他设备【如果使用了其他设备（比如负载均衡器等），请说明。】1.12设备背板图2.系统接口2.1关联系统总体概述【对本系统与其他系统的关联情况进行说明，说明源、目标系统，数据流向，数据交换时间等。可以用图表的形式分系统进行描述】2.2文件传输方式【说明本系统与外部接入系统之间的文件传输方式、传输时间和频率】外围系统传输文件清单.xls2.3关联系统参数说明【对关联系统的主机名、用途、部署位置、IP地址、源系统和目标系统的文件系统目录规划、数据交换时间等参数进行说明，以表格的方式逐一列出】2.4关联系统通讯接口说明【按表填写关联系统通讯接口说明，包括但不限于以下内容】：1)源系统；2)关联系统的主机名；3)接口方式（文件传输、MQ、TUXEDO、Socket、第三方软件等）；4)数据传输时间窗口及触发条件；5)接口文件存放目录；6)连接方式（长连接或短连接）；7)连接模式（主动连接或被动连接）；8)目的端口；9)日志文件。例如： 源系统 关联系统 接口方式 传输时间窗口及触发条 接口文件存放目录 连接方式 连接模式 目的端口 日志 备注 tuxedo 长连接 TongLink/q 主动模式 MQ 短连接 Socket 被动模式 3.应用系统说明3.1技术架构说明【描述应用系统的技术架构、采用的产品及解决方案、维护特性，包括新架构、新产品、新技术等。并对功能中的软逻辑限制给出说明】3.2应用系统各功能模块的说明【对应用系统的各功能模块进行说明】3.3目录结构清单【按表列出应用程序的目录结构，并对其进行简要说明】 目录名称 目录权限 目录用途 目录下文件 文件用途 修订说明 3.4执行程序清单【按表列出执行程序的清单，并对其进行简要说明】 路径 文件名 功能描述 3.5Shell脚本清单【按表列出Shell脚本清单，并对其进行简要说明】 路径 文件名 功能描述 3.6配置文件清单【配置文件清单指应用程序的配置文件，不包括操作系统、数据库等的配置文件】3.7交易清单【按附件表格填写交易类系统的交易清单。非交易型系统可选填】系统交易清单（交易型系统）.xls3.8备份清理策略说明【按表填写备份清理策略，需明确任务类别（备份、清理）、任务名称、操作主机对象、执行用户、脚本名称、执行时间、日志文件及成功标志等】1)对于系统备份，应包括对系统运行环境和配置参数等的备份；2)此处可不对数据库或数据文件等的备份和清理策略进行描述。 任务类别 任务名称 操作内容 操作主机 执行用户 脚本名称 执行时间 日志文件 成功标志 备份 清理 3.9日志文件清单【列出应用程序的日志文件，并对其进行说明】 路径 文件名 描述 3.10应用系统日志详细说明【对每个/每类应用程序日志的功能、格式、清理策略等进行详细说明】3.11批处理任务及调度说明【对系统每项自动或手动批处理任务进行详细说明】：1)考虑到各应用系统及调度工具软件存在差异，附表所列要素如确不涉及可不填；2)对于批量作业出错处理说明，应在应急预案文档中作为故障场景予以详细说明。批处理过程说明.xls3.12大数据量操作功能说明【对联机交易时段大数据量交易按表格式进行详细说明或预估】 交易名称 进程服务名称 操作类型(增、删、改） 允许操作的最大数据量 对应交易日志 关键检查点 3.13系统出错处理设计说明【详述系统的出错处理设计，包括出错信息、补救措施等内容】3.14系统维护设计说明【详述为了系统维护的方便性而在程序内部设计中作出的安排，包括程序中专门用于系统检查与维护的检测点和专用模块】4.数据库说明【本文所含数据库相关内容可用于在描述记录型数据文件设计信息时参考，对于无数据库，使用数据文件的应用系统，可参考本文完成数据结构设计描述】【本文所述大数据库表或大数据文件均指500万记录以上的表或文件】4.1总体说明4.1.1数据库对象命名规则数据库所描述的对象类型包括：表、视图、序列，其具体命名规则如下：1)视图命名规则：V_<视图名>,视图名能够描述视图展现的内容名称2)序列命名规则：SEQ_<序列名称>，序列名称能描述序列用途的名称3)表命名规则：a)表名最少四个区域，每个区域之间用”_”连接；b)表命名规则使用以下格式<所属模块名称>_T_<英文>_<英文>；模块名称： 模块名称 类型描述 备注 ACS 业务辅助类表 Accessorial c)英文必须是能概括表内容含义的，有意义的单词或单词缩写；d)日志类表第四个域必须为“LOG”，第三域可以为单个英文单词，也可为单词连写，但是第一个单词必须简写，简写方式参照数据字典提供的简写内容；e)如果非日志类表，第三域为英文单词缩写，第四域为单词全拼，如第三个域单词能代表表名含义，则可以全拼；f)历史表以原表信息类型为表头<模块名称>_HIS_<英文>_<英文>。4.1.2逻辑主键引入规则【此章节（4.1.2）非必填】在数据库表的设计中，我们引入了逻辑主键（ID）的概念。逻辑主键就是每张表每条记录的唯一逻辑主键。在表与表之间进行关联时，我们采用逻辑主键进行关联，形成表之间的真正逻辑关系，避免因采用业务主键（如流水号、业务代码等）关联后，业务主键信息发生变化后，所有关联表的外键都要同步进行更新。4.1.3相关工具【列出数据库在设计及运维过程中需要使用到的产品工具，如PLSQL等】4.2结构设计4.2.1数据库表（数据文件）总体结构【用图、表和文字描述总体结构，举例如下】例： 系统参数类(CFG) 系统管理类表(SMG) 业务辅助类表(ACS) 报表统计类表(STA) 影像信息类表(SDI) 流水类表(FLW) 对账类表(DE) 工作流引擎相关数据表(WF)XXXX系统数据库结构划分如图所示，参照本系统的业务需求分析和处理流程设计，并根据不同数据的特点，我们将数据库实体表可以大致分为八大类。以下进行分别描述：4.2.1.1系统参数类表(CFG-ConfigTables)该类数据表主要用于保存业务经办过程中用到的各类代码类数据（如币种代码表、摘要代码表等）、平台业务参数配置数据（如平台版面要素定义表、平台版面模板定义表等）和系统参数控制信息（如业务时间控制参数、后台处理中心切换控制、审核规则控制等表）等。该类数据表一般上线前初始化导入，以后再由专门管理部门进行统一维护。4.2.2数据库表（数据文件）关联关系【用图、表和文字描述各表（数据文件）之间的关联关系。】4.2.3数据库表（数据文件）与功能模块关系【用下表描述各表（数据文件）与功能模块关联关系。】 表（数据文件）名称 模块名称 操作内容 UPDATE DELETE INSERT SELECT 4.2.4数据库表（数据文件）结构设计【参考下表内容描述当前数据库（数据文件）结构设计情况，也可另附表格文件,但必须包括（不仅限于）下表所列要素】 表（数据文件）名称 字段名称 字段含义 字段类型和长度 是否为NULL 取值范围 缺省值 是否索引字段 … 索引描述 记录数 数据文件大小 清理策略描述 备份策略描述 字段1 表1 字段2 …… 字段n …… 字段1 字段2 …… 字段n 字段1 表n 字段2 ….. 字段n 4.3其他对象设计【此章节（4.3）非必填】4.3.1序列【介绍数据库使用的序列】4.3.2视图【介绍数据库使用的视图】4.4部署设计【详细描述数据库的部署设计】4.4.1数据库部署【举例如下】：1)硬件设备 设备名称 设备型号 设备配置 操作系统 数据库服务器1 IBM570 8C16G AIXUNIX5.4 数据库服务器2 IBM570 8C16G AIXUNIX5.4 存储设备 中、高端存储 1T2)软件情况数据库版本ORACLE10.2.0.5forAIX3)数据库配置方式数据库为DSS、OLTP混合型，OLTP占日常工作量90%以上，DSS业务比例10%。数据库配置应偏向于小事物型、多连接模式。数据库并发连接最小不低于162，数据库允许最大连接不操作500。用户并发量高，PGA设定为系统总内存的20%；SGA配置为自动分配模式，SGA占总内存为50%；数据库blocksize默认值4K，历史数据表参与统计报表分析，因此历史表空间存储单元大小为32K，其它表空间使用默认值4K。数据库要求具备容灾能力，因此数据库采取两台数据库服务器RAC方式部署，数据库连接的磁盘阵列为RAID（0+1）的方式；数据库采用archivelog方式运行，archive日志保存在数据库服务器文件系统空间中，文件系统采用RAID5方式；数据库使用RMAN工具，实现在线备份。数据库监听服务端口为11201；4)数据库工作时间正常的业务时间为每周的周一到周日，每天的8点到20点，即7×12，日终处理时间为20点到24点，24点到第二天8点为数据库备份时间。4.4.2表空间划分【用下表描述各表（数据文件）空间划分情况。】 表空间名 存储单元大小 物理文件（依照数据中心命名 规范 编程规范下载gsp规范下载钢格栅规范下载警徽规范下载建设厅规范下载 ） 空间大小 描述 SYSTEM 4K 2G 存放数据字典视图，数据字典数据等SYS、SYSTEM用户 4.4.3数据结构分布【用下表描述各表（数据文件）数据分布情况。】 表名 表中文名 表空间名 初始空间 扩展空间 加载内存 是否分区保存 ACSTTROVER_LOG ACS_业务提交日志表 DACSSPC 500M 10M 否 否 4.4.4表清理策略【用下表描述各表（数据文件）的清理策略。】 表名 表中文名 清理脚本 执行主机 执行用户 清理周期 执行时间 清理方式 相关历史表名 保存周期 日志文件 成功标志 ACS_T_TR_OVER_LOG ACS_业务提交日志表 /home/db/oracle/tools/clracs.sh db01 oracle 每日 02:00 迁移到历史表 ACS_HISTROBTAIN_LOG 半年 /home/db/oracle/log/clracs.log/log/clracs.logb/oracle/log/clracs.log ok …… …… …… …… …… …… 4.4.5分区表策略【此章节（4.4.5）非必填】【为提高运行效率，建议对数据量大、增长量大或访问频率高的表单独进行分区处理。如果有，请用下表描述各表（数据文件）的分区策略】 表名称 中文名称 分区方案 分区键 4.5安全设计4.5.1用户管理【此章节（4.5.1）非必填】【说明用户命名、用户角色、角色权限】4.5.2备份恢复【详述各表（数据文件）的备份恢复策略】备份使用磁带库，数据库每天0级备份1份，归档日志每4小时备份一次，备份成功后，对已成功备份的归档日志进行清理。数据库恢复时，文件系统准备充足的文件系统空间用于临时存放备份文件和归档日志文件，使用最近的0级备份数据加上0级备份时间点到所需恢复时间点的归档日志，通过RMAN工具对数据库进行恢复。4.6大数据表相关信息4.6.1大数据库表或大数据文件的统计更新【按表格内容描述大数据库表或大数据文件的统计更新情况】 表名称 当前记录数 统计更新策略（包括级别、周期、执行时间等） 备注 4.6.2访问大数据库表或大数据文件的主要交易情况【按表格内容描述大数据库表或大数据文件的主要交易情况】 表名称 当前记录数 交易名称 交易路径说明 该交易对此表的操作方式或内容 备注 4.6.3大数据库表或大数据文件的访问情况【按表格内容描述原有大数据库表或大数据文件的访问情况】 表名称 记录数 操作内容 影响分析 备注 5.中间件说明【如果系统使用weblogic作为中间件，则请按照下面的表格予以描述。对于使用其他中间件产品的，可参考这些表格的要素和方面按照实际情况进行说明】5.1weblogic信息说明【按下表内容描述weblogic信息】Weblogic信息说明.xlsx5.2apache信息说明【按下表内容描述apache信息】apache信息说明.xlsx5.3其他中间件【按照实际情况描述中间件相关信息】6.日常监控6.1监控指标体系说明【详述应用系统监控规范指标，包括：交易/报文、服务/组件、批处理、任务/作业、账户、操作员、密码/口令、状态标志、日期、时间、数据、操作、错误码、应用日志、流控机制、对外连接器、协议转换器、连接通道、密钥、进程、业务队列、外围系统接口以及重要配置文件监控指标】：1)表中黄色背景为强制项指标，如有相应指标的，则必须纳入监控；对于该指标在系统不适用的，则不强制；暂未实施的必须填写 计划 项目进度计划表范例计划下载计划下载计划下载课程教学计划下载 实施时间；2)其他指标根据实际情况填写。应用系统监控规范指标汇总表.XLS6.2监控方法【详述监控界面、脚本等的具体使用方法】6.3监控步骤和时间说明6.4常见问题处理说明【详述本系统中常见问题的现象、处理步骤、方法、过程、报告方式等，也可插入附件予以说明】7.常规维护7.1日常维护内容综述7.2日常维护方法【详述系统日常维护方法。维护措施应符合可监控、可维护、自动报警、减少人为判断和干预的原则。】7.3应用启停方法【详述应用服务的启停步骤，并给出简单明确的启停成功判断标志。故障处置、应急场景下的启停方法可在《应急预案》相关场景中描述】7.4日常维护步骤和时间说明【按表详述系统日常维护检查项目，包括以下要素】：1)检查分类：批量任务、应用系统、平台系统和其他类；2)检查内容（可按实际情况补充修订）：应包含所属检查分类的关键检查项。如：a)批量任务的检查项可包括但不限于：批量数据传输、批量代发代扣、批量数据处理交易、批量查询等；b)应用系统的检查项可包括但不限于：进程服务、日志检查、配置文件、日间业务数据异常或阻塞、日始、日终状态、中间件检查、模拟体验、周边系统接口检查、网络监听等；c)平台系统的检查项可包括但不限于：关联节点网络联通检查、CPU、本地硬盘I/O、内存、文件系统状态、文件系统空检查、系统PH报错检查、数据库空间、数据库逻辑日志备份、数据库日志检查等。d)其他类的检查项可包括但不限于：加密机、密钥检查等。3)检查命令：明确具体检查操作命令；4)判断依据：明确判断正常与否的标准或方法；5)检查时点：明确晨检、上午、下午等检查的时间段；6)被查主机：被检查的主机名或IP地址。 检查分类 检查内容 检查命令 判断依据 检查时点 被查主机 批量任务 批量数据传输 批量代发代扣 批量数据处理交易 批量查询 …… 应用系统 服务进程 日志检查 配置文件 日间业务数据异常或阻塞 日始状态 日终状态 中间件检查 模拟体验 周边系统接口检查 网络监听 …… 平台系统 CPU使用率 关联节点网络联通检查 本地硬盘I/O 内存 文件系统状态 文件系统空检查 系统PH报错检查 数据库空间 数据库逻辑日志备份 数据库日志检查 …… 其他 加密机状态 密钥检查 …… 8.应急策略8.1应急数据恢复策略说明【详述系统的应急数据恢复策略】8.2系统应急切换步骤【述应急库的切换方案、系统的应急切换步骤，评估应急切换过程的时间】9.附表9.1应用系统定义码表【详述应用系统自定义的编码】 模块名 定义码 定义码说明 备注 9.2应用系统错误码表【详述应用系统自定义的错误码】 模块名 错误码 错误码说明 备注 9.3应用系统参数配置表【详述应用系统的环境变量、应用参数】 模块名 参数名称 参数值 参数含义描述 9.4应用系统通讯参数配置表【详述应用系统内部、应用系统和关联系统之间的通讯参数】9.5维护参数的具体含义和生效条件的说明【详述维护参数的含义以及生效条件】 编号 系统名 就绪时间 生产IP 操作系统 源目录规划 目标目录规划 1 2 3 10.系统运维职责分工 序号 职责分工 单位名称 负责人 技术联系人 联系电话 维保有效期 1 业务管理单位 2 应用软件管理单位 3 应用软件维护单位 4 操作系统维护单位 5 中间件维护单位 6 数据库维护单位 7 硬件维护单位 8 基础环境支撑单位 9 数据库备份管理单位 10 应用级密码管理单位 11 系统级密码管理单位 12 应用源代码管理单位 11.密码表 主机名 用途 IP地址 密码用途 用户名 密码 CXJM-1 应用服务器 10.104.x.xx 操作系统 root password oracle oracle password Grid passowrd Weblogic Weblogic password CXJM-2 应用服务器 10.104.x.xx 操作系统 root password Oracle oracle pasword Grid password Weblogic Weblogic password