1、服务器性能测试指标介绍当前业界常见的服务器性能指标有:TPC-CTPC-ETPC-HSPECjbb2005 SPECjEnterprise2010SPECint2006 及 SPECint_rate_2006SPECfp2006 及 SPECfp_rate_2006SAP SD 2-Tier LINPACKRPE2一、TPC (Transaction Processing Performance Council) 即联机交易处理性能协会, 成立于 1988 年的非盈利组织,各主要软硬件供应商均参与 ,成立目标: 为业界提供可信的数据库及交易处理基准测试结果,当前发 布主要基准测试为:TPC-C
2、 : 数据库在线查询(OLTP)交易性能TPC-E : 数据库在线查询(OLTP)交易性能TPC-H : 商业智能 / 数据仓库 / 在线分析(OLAP)交易性能1.TPC-C 测试内容：数据库事务处理测试, 模拟一个批发商的订单管理系统。实际衡量服务器及数据库软件处理在线查询交易处理（OLTP）的性能表现. 正规 TPC-C 测试结果发布必须提供 tpmC 值, 即每分钟完成多少笔 TPC-C 数据库交易 (TPC-C Transaction Per Minute), 同时要提供性价比$/tpmC。如果把 TPC-C 测试结果写成为 tpm, TPM, TPMC, TPCC 均不属正规。2.
3、TPC-E 测试内容：数据库事务处理测试，模拟一个证券交易系统。与 TPC-C 一样，实际衡量服务器及数据库软件处理在线查询交易处理 （OLTP）的性能表现。正规 TPC-E 测试结果必须提供 tpsE 值，即每秒钟完成多少笔 TPC-E 数据库交易（transaction per second），同时提供 $/tpsE。测试结果写成其他形式均不属正规。对比：TPC-E 测试较 TPC-C 测试，在测试模型搭建上增加了应用服务器层，同时增加了数据库结构的复杂性,测试成本相对降低。截止目 前，TPC-E 的测试结果仅公布有 50 种左右，且测试环境均为 PC 服务器和 windows 操作系统，
4、并无 power 服务器的测试结果。除此之外， TPC 官 方组织并未声明 TPC-E取代 TPC-C，所以，说 TPC-E 取代 TPC-C 并没有根据。附 TPC-C 与 TPC-E 数据库结构对比3.TPC-H 测试内容：对大型数据仓库进行决策支持（decision support)的基准测试。TPC-H 包含一组复杂的业务查询及修改操作，属于商业智能/数据仓库/在线分析（OLAP）交易性能测试。测试结果按数据 仓库的大小分为 100GB/300GB/1TB/3TB/10TB/30TB。不同容量级别的测试结果不能进行对比。测试结果必须包含 QphHsize 及$/QphHsize。因各厂
5、家测试选择的测试级别不同，所以结果的可比性较低。二、SPEC (Standard Performance Evaluation Council) 即标准性能评估协会 ,成立于 1988 年的非盈利组织，最初由多家工作站厂家建立及后发展到各主要软硬件供应商均参与，成立目标 : 为业界提供现实而标准化之性能测试，为市场提供公平和各种有用的量度标准，并在发挥厂家优势及严格遵守法则之间取得平衡。SPEC 发布各种不同种类的基准 测试, 包括 :SPECjbb2005: 作为 JAVA 应用服务器之性能SPECjEnterprise2010: 服务器执行 J2EE 应用之性能SPEC CPU 2006:
6、 处理器单核或多核在处理整点及浮点计算性能4.SPECjbb2005 (Java Business Benchmark)基准测试模拟一个三层架构环境来进行 JAVA 应用服务器测试，目的是衡量应用服务器端 JAVA 应用 (Server-side Java Application) 之性能。正规SPECjbb2005 测试结果发布必须提供 bops 值, 即每秒钟完成多少笔 JAVA 业务操作 (Business Operation Per Second), 同时要求提供完整的测试环境资料，包括：服务器名称，处理器内核数量，线程数量，JVM 名称，JVM 数量，bops/JVM 性能等。5.S
7、PECjEnterprise2010 基准测试: 模拟汽车供应链系统，来测试采用 J2EE (Java 2 Enterprise Edition) 5.0 技术之应用服务器性能。正规 SPECjEnterprise2010 测试结果发布必须提供 EjOPS 值, 即每秒钟完成多少笔企业级 JAVA 操作 (Enterprise java Operation Per Second), 同时要求提供完整的测试环境资料，包括：Java EE 应用服务器名称 ,DB 服务器名称，处理器内核数量，J2EE 服务器数量等。6.SPECint2006 及 SPECint_rate_2006 基准测试之目的,
8、 分别是衡量单处理器( 吞吐量)及多处理器( 整机) 的整点计算能力和编译器的优化能力.测试结果为相对性能值, 主要反映处理器整点计算、吞 吐量、缓存性能及编译器之优化能力, SPEC 整点计算能力提供共 4 类型测试结果 ,分别如下:SPEC 标准选项来编译测试应用 厂家最优化选项来编译测试应用单处理器(吞吐量) 整点计算能力 SPECint_base2006 SPECint2006多处理器(整机)整点计算能力 SPECint_rate_base2006 SPECint_rate_20067.SPECfp2006 及 SPECfp_rate_2006 基准测试之目的,分别是衡量单处理器 (吞
9、吐量) 及多处理器(整机)的浮点计算能力和编译器的优化能力. 测试结果为相对性能值, 主要反映处理器浮点计算、缓存性能及编译器之优化能力. SPEC 浮点计算能力提供共 4 类型测试结果,分别如下SPEC 标准选项来编译测试应用 厂家最优化选项来编译测试应用单处理器(吞吐量) 浮点计算能力 SPECfp_base2006 SPECfp2006多处理器(整机)浮点计算能力 SPECfp_rate_base2006 SPECfp_rate_2006三、SAP 基准测试组织由 SAP 及其技术合作伙伴代表组成，包括各主要软硬件供应商支持，设立目标 : 提供一个专门为 SAP ERP 企业资源管理应用
10、设计的基准测试工具, 所有厂家必须通过 SAP 测试性能作为SAP 服务器配置 (Sizing)的标准指标。SAP 基准测试组织发布各种不同种类的基准测试 , 包括 :SAP SD (2-Tier / 3-Tier) Standard Application Benchmark : SAP Sales & Distribution ModuleSAP BW Standard Application Benchmark : SAP Business Information Warehouse ModuleSAP TRBK Standard Application Benchmark : SAP
11、Banking Account & Deposite Management SAP Enterprise Portal-ESS Standard Application Benchmark : SAP NetWeaver Portal8.SAP SD 2-Tier 基准测试内容 ：衡量不同硬件厂家加上数据库后执行 SAP 企业资源管理应用销售及分销 (SD 即 Sales & Distribution) 模块时的性能表现。SAP SD 两层结构基准测试将应用服务器及数据库服务器安装在同一台物理服务器上。测试结果会被标准化成 SAP SD 应用模块的 SAPS 应用标准性能值（SAP Appli
12、cation Performance Standard）。SAPS 为一个独立于硬件的性能指标。100 SAPS 值在 SAP SD 应用定义里等同于每小时 2000 笔商业处理定单项目 (fully business processed order line items per hour)。每一笔商业处理定单项目包含新定单产生、发货单产生、定单显示、改变发货内容、货品录入、列出定单及产生发票；从技术角度来说，等同于每小时 2400 笔 SAP 交易或每小时 6000笔对话 (控制台改变) 加上每小时 2000 笔录入操作。四、Linpack 是业界应用最广的的用于测试高性能计算机系统浮点性能
13、的 benchmark, 在目标集群中运行 Linpack 测试程序,测试结果以浮点运算每秒（Flops）给出。MFlops=每秒一百万次（106）浮点运算GFlops=每秒十亿次（109）浮点运算TFlops=每秒一万亿次（ 1012）浮点运算PFlops=每秒一千万亿次（1015）浮点运算五、RPE2 是 relative performance estimate 2 的缩写，由 IDEAS international 公司发布。它只是理论上，通过对 TPC-C，TPC-H， SAP SD 2-Tier，SPECjbb，SPECint_rate，SPECfp_rate 等benchmark 进行几何运算得来，并不经过真实的测试环境。主要 为了在不同的产品在不同的benchmark 各有优劣时进行比较。
