综合网管——网络应用服务监控.doc

1、综合网管 NM 北京世创恒晟科技有限公司世创恒晟综合网络管理网络应用服务监控综合网管 NM 北京世创恒晟科技有限公司综合网管 NM 北京世创恒晟科技有限公司目录1 公司简介 .52 综合网管 NM 产品示意图 53 网络应用服务监控 .73.1 Microsoft .NET.83.2 Jboss 服务器 .83.3 Oracle 应用服务器 83.4 Tomcat 服务器 .93.5 WebLogic 服务器 .93.6 WebSphere 服务器 93.7 数据库服务器 103.7.1 MySQL 数据库 113.7.2 Oracle 数据库 .113.7.3 MS SQL 数据库 .113

2、.7.4 IBM DB2 数据库 123.8 服务器 .133.9 邮件服务器 143.9.1 Exchange Server .143.9.2 邮件服务器 153.9.3 Web 事务监视器 153.10 各种服务 .163.10.1 Apache 服务器 163.10.2 IIS 服务器 163.10.3 PHP 监视 .173.11 Web 服务器 .173.11.1 Web 服务 .173.12 服务监视 .173.12.1 Telnet173.12.2 JMXMX4J/JDK1.5173.12.3 SNMP/网络设备 .173.13 网站监视 .183.13.1 URL 监控 .18

3、3.14 脚本监视 .183.15 自定义监视器 193.16 告警功能 .204 方案部署 .215 维护和支持 21综合网管 NM 北京世创恒晟科技有限公司1 公司简介北京世创恒晟科技发展有限公司是一家专业提供 IT 综合管理解决方案的软件厂商。它为管理 IT 网络，提供业界领先的开放式、可伸缩、跨平台的解决方案，可对政府、教 育、金融、证券、能源等行业用户的系统、网络、应用以及业务流程进行全面管 理。世创恒晟 利用业界领先的核心技术，针对客户 IT 管理的各种需求，提供能 涵盖多种领域的、功能强大的、性价比高而又易于使用的产品。同时 世创恒晟 强大的研发中心和支持队伍，可以使客户的投资得

4、到更好的回报。2 综合网管 NM 产品示意图网络设备管理 Network Manager网络设备管理：管理网络服务器、路由器、交换机、防火墙、个人电脑。他们的 CPU、内存、硬盘、带宽流量、资产使用情况、故障、运行情况；监控web、URL 等的运行情况；管理网络 topo。用户行为监控 Network Action Monitor监控用户的上网行为：用户实时流量、通信协议使用、网络游戏、web 访问、疯狂下载、ftp、聊天、telnet、 P2P（BT 电驴等）、安全事件、攻击行为等网络应用服务监控 Network Application Monitor网络及应用系统管理：应用服务监控、数据库

5、监控、web 服务器监控、网站监控监控系统Monitor网络流量监控 Network Netflow 网络流量监控：每个应用占据了多大带宽流量控制 Netflow Control网络流量控制：防止疯狂下载，个人上网等非公娱乐占用大力带宽。保障正常办公业务的带宽，以及正常运行。控制系统Control 用户行为控制 Action Control控制：疯狂下载、实时聊天、网络游戏、电影、攻击等网络级安全扫描后漏洞修补 Network Scan and Patch Manager主动报告网络漏洞，帮助修补漏洞以及确保顺应性。由于具有漏洞扫描、开放端口检测、修补程序管理和漏洞报告功能，保护网络免遭安全威

6、胁和恶意攻击安全系统 Security入侵检测 反黑客攻击、反异常攻击。SW 软件平台 UNIX, linux，windows，MAC OS，所有主流软件平台。世创恒晟综合网管 综合网管 NM2.0HW 硬件平台 公司独立硬件系统平台（可选）。综合网管 NM 北京世创恒晟科技有限公司产品实施容易。产品简单易用，界面友好。产品适应性强，支持多厂家设备。产品兼容性好，无缝连接。产品同时支持CS架构和BS架构，基于 Web 界面，用户可以在同一个界面上管理所有的设 备。用户不需要在七拼八凑的多个产品之间寻找需要的功能，产品之间自动关联 相关的功能。用户不需要到机房管理站操作，通过 Web 浏览器连接

7、到控制台， 直接远程控制。此产品的突出特点在于全面管理 IT 基础架构，直观设备运营状态，动态监 控网络状况，及时了解故障信息。本产品通过 WEB方式 的帮助台模块将所有网络管理功能整合在同一平台下面， 各功能之间无缝联动。本产品对 WAN 底层架构 (WAN 链路和路由器)，LAN 底层架构 (交换机、 打印机和台式机)，服务器 (HTTP、Mail、FTP、LDAP、DNS 等)提供了全面的 监控。对于各种应用程序和服务器，包括应用服务器、数据库、操作系统、邮件服 务器、web 服务器、各种服务以及自定义的监视器，可以为整个业务基础架构提 供统一的视图；提供监视器分组功能，可以将相关的设备

8、关联到一个监视器组中， 方便管理；全球范围的所有监视组的状态都可以直 观地表示出来。对于企业的资产以及合同等信息，本产品提供了完整的管理功能。能帮助用户 基于在线 web 或通过 Email 提交工单。能自动执行诸多重要的工作流任务，包括 发送案例、确认请求、通知技术人员。能实现更高的生产效率，提供综合网管 NM 北京世创恒晟科技有限公司更优质的服务，同时便于每位成员获取消息并有效地共享知识，另外还 能缩短解决问题的时间，提高服务满意度。本产品对于企业的网络流量进行了详细的分析和统计，可以有效地帮助网络管 理员主动保障网络安全、避免滥用网络、管理带宽需求、监视网站访问情况，确 保内部职员合理地

9、利用网络。对于企业种设备的日志信息，本产品通过对系统日志等多种方式进行集中和统 一的管理，避免了重要信息的遗漏。本产品对于设备的配置提供了专门的模块，是对于大规模网络的配置和维护更 加简单和容易。对于网络的漏洞和补丁，本产品也能进行有效的管理。使管理人员对于网络 的问题做到防患于未然。本产品通过智能化警报关联分析和警报抑制有效控制警报, 利用邮件/ 短信等 多种手段将故障及时通知管理员。3 网络应用服务监控综合网管NM 简单易用，它提供对网络中的应用程序和资源的远程 监控，帮助管理人员更加方便地管理整个业务基础架构，协助他们在诸如服务中 断和应答缓慢等问题影响到最终用户之前，及时发现问题并加以

10、解决，从而有效 地减少故障修复时间，增加系统的可用性和稳定性。综合网管NM可以监视各种应用程序和服务器，包括应用服务器、 数据库、操作系统、邮件服务器、web 服务器、各种服务以及自定义的监视器。 它通过定期收集并分析数据的方法来检测监视器的性能。下面我们来具体介绍： 综合网管NM 通过对应用服务器及其服务的更快检测和诊断，提供高性能业务流程管理。支持的应用服务器有： Microsoft .NET JBoss 服务器 Oracle 应用服务器 Tomcat 服务器 WebLogic 服务器 WebSphere 服务器综合网管 NM 北京世创恒晟科技有限公司3.1 Microsoft .NET对

11、于 MS.Net，AP 可以监视的版本有.Net 1.1,2.0，可以监视的参数有健康 状态、可用性、线程（物理线程数、逻辑线程数）、内存（堆尺寸、%GC 时间比）、 锁（包括队列长度、锁比率）、例外（每分钟例外数）、连接（每分钟连接数）、 安全（每分钟运行时间检测的总数）、 JIT（%JIT 的时间）、网络流量（每分钟发 送字节数、每分钟接收字节数）；可以监视的 .Net 应用参数有请求统计（包括每 分钟的请求数、每分钟的错误数、每分钟超时请求数、队列中的请求数）、事务（包括每分钟的事务数、每分钟中断事务数、每分钟未决的事务数）、会话（活 动会话）、网络流量（包括每秒发送字节、每秒接收字节）

12、。3.2 Jboss 服务器对于 Jboss，AP 可以监视的版本有 Jboss 3.2.x,4.0.x，可以监视的参数有监视 器明细（包括健康状态、可用性、JVM 使用率、服务器响应时间等）、Web 应用（包括名称、Context Root、响应类型、请求总数及平均请求数）、Servlet 明细（包 括名称、执行时间及调用次数）、EJB 明细（包括名称、类型、模块、创建的实 例数、注销的实例数、可用的实例数、预备状态的实例数及共享的实例数）、JDBC 连接池明细（包括 JDBC 连接池、池大小、当前使用连接、创建的连接、注销的 连接及空闲超时时间），同时用户还可以根据自己的需要添加自定义的属

13、性。3.3 Oracle 应用服务器对于 Oracle AS，AP 可以监视的版本有 Oracle AS 10g，可以监视的参数有监 视器明细（包括健康状态、可用性等）、请求明细（包括吞吐量、当前活动连接、 连接的平均处理时间、当前活动的请求）、服务器响应时间（包括响综合网管 NM 北京世创恒晟科技有限公司应时间、数 据吞吐量、处理的数据）、Servlets（ Servlets 的总数）、OPMN 进程内存状态（包括已用内存及可用性）、OC4J JVM 统计（包括活动线程组、活动线程、堆 使用率、JDBC 连接总数及 JDBC 事务明细）、Web 应用（包括 Servlets 总数、 吞吐量、

14、处理请求所用时间、活动请求数量及会话时间）、 JMS 属性（包括出队 平均时间、入队平均时间、等待消息数、出列消息数、入列消息数及消息总数）、EJB 统计（包括 EAR 名称、 OC4J 进程名、类型、创建数、活动数、被动数 及共享数）、响应摘要（指的是各种 HTTP 响应的计数）。3.4 Tomcat 服务器对于 Tomcat，AP 可以监视的版本有 3.x,4.x,5.x。（对于 3.x 和 4.x，需要在产 品中安装代理，而对 5.x 则不需要，它使用 JMX 和 servlet 来获取通过 http 收集 数据。）可以监视的参数有健康状态、可用性、平均响应时间、每秒请求数、每 秒字节数

15、、内存总数、已用内存、空闲内存、忙碌线程、当前线程、响应摘要( 包 括响应类型及每个类型中的响应数量 )、应用摘要（列出服务器中运行的不同 Web 应用）及会话明细（会话数量）。对于不同的版本，可以获取到的参数不同。3.5 WebLogic 服务器对于 weblogic，我们可以监视的版本有 weblogic 6.1, 7.x, 8.x,9.x，可以监视 的参数有监视器明细（包括健康状态、可用性、 JVM 堆大小及服务器响应时间）、 web 应用明细（包括活动会话数、最大会话数、会话总数及 Servlet 数）、Servlet 明细（包括名称、执行时间及调用次数）、EJB 明细（包括名称、类型

16、、活化数、 钝化数、等待线程数、当前缓存 Bean 数、使用 Bean 数、空闲 Bean 数、事务 超时数、事务回退数及事务提交数）、数据库连接池明细（包括连接池大小、活 动连接数、遗漏连接数及线程等待）、线程池明细（包括线程总数、空闲线程数、 使用线程数及暂停请求数），同时用户还可以根据自己的需要来添加自定义的属 性（后面会专门讲解添加自定义监视器及属性的功能）。3.6 WebSphere 服务器对于 websphere，我们可以监视的版本有 weblogic 5.x, 6.x，可以监视的参数 有监视器明细（包括健康状态、可用性、事务明细、服务器响应时间、 JVM 内 存使用率、CPU 使

17、用率、空闲内存等）、web 应用程序的会话明细（包括用户会 话数、非法会话数及同类中断）、EJB 明细（包括名称、类型、并行活动数、总 方法调用数、方法响应平均时间、池大小、激活时间及钝化时间）、当前 JDBC 连接池明细（包括名称、池类型、创建个数、池大小、并行等待数、失败线程数、 平均等待时间及平均使用比）、线程池明细（包括名称、线程创建数、注销线程 数、活动线程数、线程池大小及平均时间比），同时用户还可以根据自己的需要 来添加自定义的属性。综合网管 NM 北京世创恒晟科技有限公司3.7 数据库服务器综合网管NM 提供监视系统资源的数据库服务器监视。它还将主动 通知数据库和系统管理员关于可

18、能损害数据库性能的潜在问题，数据库服务器具 有连接到数据库资源、处理数据库中接收到的任何查询、监视各种系统表列值、 收集数据等监视能力，并且在数据库系统属性超出给定阈值时，还可以通过警报 发出通知。支持的数据库服务器如下： MySQL 数据库服务器 Oracle 数据库服务器 MS SQL 数据库服务器 IBM DB2 数据库服务器3.7.1 MySQL 数据库对于 MySQL，AP 可以监视的版本有 MySQL 3.23.x，4.x，5.x，可以监视的 参数有监视器明细（包括健康状态、可用性、版本、端口、基本目录、数据目录 等）、连接时间（包括连接时间及请求率）、请求统计（包括请求率、接收字

19、节率及发送字节率）、连接统计（包括打开的连接数、中止的连接数及中综合网管 NM 北京世创恒晟科技有限公司止的客户端 数）、线程明细（包括使用线程数、缓冲内线程数及线程缓冲大小）、数据库明细（包括数据库名及数据库大小）、表锁统计（包括立即锁及等待锁）、键效率（包 括键命中、使用的键缓冲及键缓冲的大小）、请求缓存命中（包括请求缓存命中、 请求缓存大小及请求缓存限制，该性能数据在 MySQL 版本 3.23.x 上无效）。3.7.2 Oracle 数据库对于 Oracle，AP 可以监视的版本有 8.x，9i，10g，RAC。可以监视的参数 有监视器明细（包括健康状态、可用性等）、连接时间、用户活动

20、（表示执行 SQL 语句的用户的个数）、数据库明细（包括数据库生成时间、打开方式及日志方式）、 数据库状态（包括数据库大小、平均执行此数、读次数、写次数及块大小）、表 空间明细（包括名称、分配字节数、分配块数及数据文件数）、表空间状态（包 括名称、状态、自由字节数、自由块数、读次数、写次数、读时间及写时间）、 SGA 明细（包括缓冲缓存大小、共享池大小、Redo 日志缓冲大小、库缓存大小、 数据字典缓存大小、SQL 区大小及固定区大小）、SGA 状态（包括缓冲命中率、 数据字典命中率、库命中率及空闲内存）、数据文件性能（包括数据文件名、表 空间名、状态、创建字节数、读次数、写次数、平均读时间及

21、平均写时间）、会 话明细（包括 ID、状态、操作系统用户名、Oracle 用户名、停留时间、 CPU 使 用时间、排序内存数、扫描表数、物理读次数、逻辑读次数、提交次数、光标数 及缓冲缓存击中率）、回退段（包括段名、包含回退段的表空间、状态、当前大 小、初始扩展段大小、次级扩展段大小、最小扩展段、最大扩展段、击中率、 HWM 大小、压缩次数、跨段次数及扩展次数）。3.7.3 MS SQL 数据库对于 MS SQL 数据库，AP 支持的版本是 MS SQL Server 2000 及 2005，可以 监视的参数有监视器明细（包括健康状态、可用性、版本、端口、 ODBC 驱动版 本等）、内存使用率

22、（包括总内存、SQL 缓存内存、锁内存、优化内存、连接内 存、分配工作空间内存、等待分配内存的进程数量及成功分配到内存的进程数 量）、缓冲管理器统计（包括缓冲击中率、页查找数 /分、页物理读取次数、页物 理写入次数、页总数、数据库页数及自由页数）、连接统计（包括连接时间、活 动连接数、每分钟登陆数及每分钟注销数）、缓存明细（包括缓存击中率、每分 钟使用缓存、缓存计数及缓存页数）、锁明细（包括每分钟锁请求数、每分钟锁 等待时间、每分钟锁超时次数、每分钟死锁数及平均锁等待时间）、SQL 统计（包 括每分钟批量请求数、每分钟 SQL 编译数、每分钟 SQL 重编译数、每分钟自动 参数数及每分钟失败自

23、动参数数）、 Latch 明细（包括每分钟 Latch 等待数和平均 Latch 等待时间）、访问方法明细（包括每分钟全扫描数、每分钟范围扫描数及每 分钟探针扫描数）、数据库明细（包括数据文件明细、日志文件大小、事务明细 及日志刷新明细）。综合网管 NM 北京世创恒晟科技有限公司3.7.4 IBM DB2 数据库对于 IBM DB2 数据库，AP 支持的版本是 IBM DB2 8.x，可以监视的参数有 监视器明细（包括健康状态、可用性等）、连接统计（包括连接时间、连接总数、 本地连接数及远程连接数）、代理统计（包括活动代理数、空闲代理数、代理数 及代理等待数）、数据库信息（包括数据库名、健康状

24、态、数据库别名、数据库路径、数据库状态、连接时间、死锁率、日志使用率及排序溢出百分比）、事务 统计（包括成功查询数、失败查询数及工作单位数）、缓冲区性能（包括包缓存 击中率和目录缓存击中率）、缓冲统计（包括缓冲池击中率、检索页击中率、数 据页击中率、直接读次数及直接写次数）。3.8 服务器在网络管理方面，维护网络状态和连通性是更高水平的反映。它首先需要了 解网络中计算机的状态，包括它们的负载情况（是否超载）以及利用率（是否过 度使用），以便在已识别的超载或性能低下的系统中启用必要的修正管理功能。 服务器级管理是一个实际概念，包括人工干预、人力资源和要执行的管理任务。 综合网管NM 提供的服务器

25、级监视功能用以实现这些目标并简化主机的 配置管理过程。支持的操作系统如下： Windows Linux Sun Solaris IBM AIX HP Unix综合网管 NM 北京世创恒晟科技有限公司 Tru64 Unix FreeBSD Mac OS可以监视的具体参数有 CPU 利用率、磁盘利用率、物理内存利用率、交换 内存利用率（仅用于 IBM AIX, Linux, Solaris, FreeBSD, Windows）、系统负载（仅用于 IBM AIX, FreeBSD,Linux, Mac OS,HP-UX, Solaris）、磁盘 I/O（仅用 于 IBM AIX, Linux, So

26、laris）进程监视（内存使用率、 CPU 使用率）、服务监视（仅用于 Windows）、事件日志监视（仅用于 Windows）。3.9 邮件服务器综合网管NM 支持以下邮件服务器的监视9 Exchange Server9 邮件服务器3.9.1 Exchange Server对于 Exchange 服务器，可以监视的参数有：SMTP 连接、消息转发代理 连接、POP 及 IMAP 连接、信息存储连接及用户数、SMTP 状态、MTA 状态、 综合网管 NM 北京世创恒晟科技有限公司信息存储状态、信息存储邮箱状态、目录及事件服务状态、信息存储公开目录状 态。3.9.2 邮件服务器对于 Mail 服

27、务器，可以监视的参数有：健康状态、可用性及连接时间；AP 连接到邮件服务器并执行 SMTP 和 POP 操作，从而来判断 Mail 服务器的可用 性。3.9.3 Web 事务监视器综合网管NM可以监视 Web 事务（目前仅支持 JDK1.5）。Web 事务监视器帮助用户监视从 URL 到 SQL 整个端到端的 Web 事务。可以监视由 URL 执行的 Web 组件、 EJB、Java 和 SQL 语句的性能规格。此外，为了识别性能瓶颈， 还可跟踪各种 J2EE 和 Java 组件的各种方法。对 Web 事务监视器的监视，需要在应用服务 器中插入代理，通过代理，可以收集服务器调用的 URL 性能

28、数据并显示在 Web 事务监视 器中。3.10各种服务综合网管NM 还可以监视系统上运行的各种服务，包括 Apache 服 务器、IIS 服务器、 PHP 服务器、 Web 服务器、Web 服务、任意 TCP 端口、Telnet、 JMXMX4J/JDK1.5、SNMP/网络设备。综合网管 NM 北京世创恒晟科技有限公司3.10.1 Apache 服务器综合网管NM 可以连接到 Apache 并检查其可用性和应答时间，当 服务器状态和扩展状态为激活时，综合网管NM就可以获得下列数据：总访问次数、总字节数、CPU 负 荷、正常运行时间、每秒的请求、每秒的字节数、每个请求的字、忙碌的工作人 员、空

29、闲的工作人员。3.10.2 IIS 服务器可以连接到 IIS 服务器并检查其可用性、监控应答时间并基于指 定阈值更新状态。3.10.3 PHP 监视综合网管NM 连接到服务器,检索 PHP 并检查其可用性，监控应答 时间并基于指定阈值更新状态，在 Linux 系统中，还能显示 PHP 所在系统中存 在的页面故障。3.11Web 服务器综合网管NM 连接到 web 服务器并检查其可用性，监控应答时间 并基于指定阈值更新状态。3.11.1 Web 服务连接到 Web 服务来检查其可用性，监视 WSDL URL 的响应时间以及 Web服务操作的执行时间。3.12服务监视综合网管NM 可以监视网络中在

30、特定/默认端口（如 FTP-21、 Telnet-23 等）上运行的不同服务。通过连接到配置的服务器来检查服务的可用 性和响应时间。其中，响应时间是连接到端口、执行给定命令和搜索字符串所花 费的时间。3.12.1 Telnet通过连接到 Telnet 端口来检测其可用性。3.12.2 JMXMX4J/JDK1.5综合网管 NM 北京世创恒晟科技有限公司连接到 MX4J-JMX 代理，检查 RMI 连接器的可用性和响应时间。用户还 可以在同一个页面中查看 MX4J-JMX 代理的自定义属性。此外，可以通过配置 JMX 通知来为 JMX 生成警报。3.12.3 SNMP/网络设备连接到应用程序中运

31、行的 SNMP 代理，并监视服务的可用性和性能。用户 还可以添加 SNMP 代理的自定义属性。3.13网站监视综合网管NM 提供不间断的 URL 监控服务，能持续监控指定的 URL 或网页。URL 监视器能验证指定的、可设地址的、标准的 HTTP 和 HTTP URL。 通过扫描 HTTP 和 HTTPS 页检查网站的可用性。综合网管NM 提供了两种 URL 监控方法3.13.1 URL 监控URL 序列可以监视的参数有健康状态、类型、URL 地址、匹配内容、请求方法、可用 性、应答时间、当前状态、当前页大小及页大小变化百分比。综合网管 NM 北京世创恒晟科技有限公司3.14脚本监视使用自定义

32、脚本来手动监视脚本输出非常乏味，综合网管NM 提供脚 本监控功能来管理内部所使用的自定义的 Windows/Linux 脚本，并可以为其配置 相应的告警。在新建脚本监视器过程中，需要提供自定义脚本的位置、被监控的 属性(数字 /字符串) 、重定向输出的输出文件以及轮询间隔，综合网管NM 将基于指定轮询间隔执行脚本，并将其输出发送到配置的输出文件，综合网管NM 解析输出文件并执行配置的动作。3.15自定义监视器如果上述监视对象范围仍不能满足客户的要求，综合网管NM 还具有 自定义监视器功能。综合网管NM 具有以下几种类型的自定义监视器： 利用监视通过 SNMP (简单网络管理协议)和 JMX (

33、Java 管理扩展) 公开其管理信息的 Java 应用程序或者其它程序。具体来说：对于启用 JMX 接口的程序，可以添加要监视的 MBean 值；对于启用 SNMP 代理的程序，可以 添加要监视的 OID 的值，综合网管NM 内自带一个 MIB 浏览器，通过它 用户可以很容易的将自定义监视器的属性添加进来，默认情况下，MIB Browser 加载 RFC1213 MIB，用户可以通过上传文件功能（在管理功能中会详细介绍） 来加载自己的私有 MIB 文件。综合网管 NM 北京世创恒晟科技有限公司综合网管NM 通过 WMI 的方式来监视 Windows 性能计数器，您可 以手动添加自己关心的 Wi

34、ndows 性能参数来进行监视，并可以对参数设置阈值， 综合网管NM 可以根据阈值生成告警和动作。综合网管 NM 北京世创恒晟科技有限公司3.16告警功能上面介绍的是 综合网管NM 的监视功能，用户可以对所监视参数设 置阈值，当被监视参数超过设置的阈值的时候就会产生告警来通知用户进行处 理，并协助用户分析问题产生的根本原因。警报是基于某种条件或某个标准生成的通知，有助于检测网络中运行的服务 器发生的问题。综合网管NM 用不同颜色区分告警级别，分别是： 严重 警告 正常综合网管 NM 北京世创恒晟科技有限公司用户可以为监视器的属性设置阈值，如果满足设置的阈值配置文件条件，则 生成警报。4 方案部署服务器三台。下面是方案所需的最低硬件要求： 处 理器 2GHz Intel Pentium D内 存 : 1G硬 盘 ： 160G 用户可根据自己的性能要求提高服务器的配置或者增加服务器。 具体产品的安装和使用请参考相应产 品的相关文档。5 维护和支持北京世创恒晟科技发展有限公司通过电话和 Email 的方式为客户提供及时服务和技术支持。北京世创恒晟科技发展有限公司也会不定期发布服务包，为客户提供升级和维护服务。