服务器性能测试指标介绍
当前业界常见的服务器性能指标有:
TPC-C
TPC-E
TPC-H
SPECjbb2005
SPECjEnterprise2010
SPECint2006 及SPECint_rate_2006
SPECfp2006 及SPECfp_rate_2006
SAP SD 2-Tier
LINPACK
RPE2
一、TPC (Transaction Processing Performance Council) 即联机交易处理性能协会, 成立于1988年的非盈利组织,各主要软硬件供应商均参与,成立目标: 为业界提供可信的数据库及交易处理基准测试结果,当前发布主要基准测试为:
TPC-C : 数据库在线查询(OLTP)交易性能
TPC-E : 数据库在线查询(OLTP)交易性能
TPC-H : 商业智能/ 数据仓库/ 在线分析(OLAP)交易性能
1.TPC-C测试内容:数据库事务处理测试, 模拟一个批发商的订单管理系统。实际衡量服务器及数据库软件处理在线查询交易处理(OLTP)的性能表现. 正规TPC-C 测试结果发布必须提供tpmC值, 即每分钟完成多少笔TPC-C 数据库交易(TPC-C Transaction Per Minute), 同时要提供性价比$/tpmC。如果把TPC-C 测试结果写成为tpm, TPM, TPMC, TPCC 均不属正规。
2.TPC-E测试内容:数据库事务处理测试,模拟一个证券交易系统。与TPC-C一样,实际衡量服务器及数据库软件处理在线查询交易处理(OLTP)的性能表现。正规TPC-E测试结果必须提供tpsE值,即每秒钟完成多少笔TPC-E数据库交易(transaction per second),同时提供$/tpsE。测试结果写成其他形式均不属正规。
对比:TPC-E测试较TPC-C测试,在测试模型搭建上增加了应用服务器层,同时增加了数据库结构的复杂性,测试成本相对降低。截止目前,TPC-E的测试结果仅公布有50种左右,且测试环境均为PC服务器和windows操作系统,并无power服务器的测试结果。除此之外,TPC官方组织并未声明TPC-E取代TPC-C,所以,说TPC-E取代TPC-C并没有根据。
附TPC-C与TPC-E数据库结构对比
3.TPC-H测试内容:对大型数据仓库进行决策支持(decision support)的基准测试。TPC-H包含一组复杂的业务查询及修改操作,属于商业智能/数据仓库/在线分析(OLAP)交易性能测试。测试结果按数据仓库的大小分为100GB/300GB/1TB/3TB/10TB/30TB。不同容量级别的测试结果不能进行对比。
测试结果必须包含QphH@size及$/QphH@size。因各厂家测试选择的测试级别不同,所以结果的可比性较低。
二、SPEC (Standard Performance Evaluation Council) 即标准性能评估协会,成立于1988年的非盈利组织,最初由多家工作站厂家建立及后发展到各主要软硬件供应商均参与,成立目标: 为业界提供现实而标准化之性能测试,为市场提供公平和各种有用的量度标准,并在发挥厂家优势及严格遵守法则之间取得平衡。SPEC发布各种不同种类的基准测试, 包括:
SPECjbb2005: 作为JAVA 应用服务器之性能
SPECjEnterprise2010: 服务器执行J2EE 应用之性能
SPEC CPU 2006: 处理器单核或多核在处理整点及浮点计算性能
4.SPECjbb2005 (Java Business Benchmark)基准测试模拟一个三层架构环境来进行JAVA应用服务器测试,目的是衡量应用服务器端JAVA 应用(Server-side Java Application) 之性能。正规SPECjbb2005 测试结果发布必须提供bops 值, 即每秒钟完成多少笔JAVA 业务操作(Business Operation Per Second), 同时要求提供完整的测试环境资料,包括:服务器名称,处理器内核数量,线程数量,JVM名称,JVM数量,bops/JVM性能等。
5.SPECjEnterprise2010基准测试:模拟汽车供应链系统,来测试采用J2EE (Java 2 Enterprise Edition) 5.0 技术之应用服务器性能。正规SPECjEnterprise2010 测试结果发布必须提供EjOPS 值, 即每秒钟完成多少笔企业级JAVA操作(Enterprise java Operation Per Second), 同时要求提供完整的测试环境资料,包括:Java EE 应用服务器名称,DB服务器名称,处理器内核数量,J2EE服务器数量等。
6.SPECint2006 及SPECint_rate_2006 基准测试之目的,分别是衡量单处理器(吞吐量)及多处理器(整机)的整点计算能力和编译器的优化能力.测试结果为相对性能值,主要反映处理器整点计算、吞吐量、缓存性能及编译器之优化能力, SPEC整点计算能力提供共4类型测试结果,分别如下:
7.SPECfp2006 及SPECfp_rate_2006 基准测试之目的,分别是衡量单处理器(吞吐量)及多处理器(整机)的浮点计算能力和编译器的优化能力. 测试结果为相对性能值, 主要反映处理器浮点计算、缓存性能及编译器之优化能力. SPEC浮点计算能力提供共4类型测试结果,分别如下
三、SAP基准测试组织由SAP及其技术合作伙伴代表组成,包括各主要软硬件供应商支持,设立目标: 提供一个专门为SAP ERP 企业资源管理应用设计的基准测试工具, 所有厂家必须通过SAP测试性能作为SAP服务器配置(Sizing)的标准指标。SAP基准测试组织发布各种不同种类的基准测试, 包括:
SAP SD (2-Tier / 3-Tier) Standard Application Benchmark : SAP Sales & Distribution Module SAP BW Standard Application Benchmark : SAP Business Information Warehouse Module SAP TRBK Standard Application Benchmark : SAP Banking Account & Deposite Management SAP Enterprise Portal-ESS Standard Application Benchmark : SAP NetWeaver Portal
8.SAP SD 2-Tier 基准测试内容:衡量不同硬件厂家加上数据库后执行SAP企业资源管理应用销售及分销(SD 即Sales & Distribution) 模块时的性能表现。SAP SD 两层结构基准测试将应用服务器及数据库服务器安装在同一台物理服务器上。测试结果会被标准化成SAP SD 应用模块的SAPS 应用标准性能值(SAP Application Performance Standard)。SAPS 为一个独立于硬件的性能指标。100 SAPS 值在SAP SD 应用定义里等同于每小时2000笔商业处理定单项目(fully business processed order line items per hour)。每一笔商业处理定单项目包含新定单产生、发货单产生、定单显示、改变发货内容、货品录入、列出定单及产生发票;从技术角度来说,等同于每小时2400笔SAP交易或每小时6000笔对话(控制台改变) 加上每小时2000笔录入操作。
四、Linpack是业界应用最广的的用于测试高性能计算机系统浮点性能的benchmark, 在目标集群中运行Linpack测试程序,测试结果以浮点运算每秒(Flops)给出。
MFlops=每秒一百万次(10^6)浮点运算
GFlops=每秒十亿次(10^9)浮点运算
TFlops=每秒一万亿次(10^12)浮点运算
PFlops=每秒一千万亿次(10^15)浮点运算
五、RPE2是relative performance estimate 2的缩写,由IDEAS international公司发布。它只是理论上,通过对TPC-C,TPC-H,SAP SD 2-Tier,SPECjbb,SPECint_rate,SPECfp_rate等benchmark 进行几何运算得来,并不经过真实的测试环境。主要为了在不同的产品在不同的benchmark各有优劣时进行比较。
1.技术建议书 1.1.系统部署结构及软硬件配置 1.1.1.设备部署方案 常见的集团式部署方案有三种: 集中式部署:目录数据与原文均集中在总部服务器中; 分布式部署:目录数据与原文数据均分散在各个二级单位中存储, 统将全集团数据 再由一套分布式全文检索系提供统一门户、统一权限的检索; 混合式部署:目录数据集中存储在总部服务器中,电子文件存放在各个二级单位服务器中; XXXX根据本次项目需求与特点推举以纯B/S软件平台构成的集中式部署方案。 各种方案优点对比:
1.1. 2.硬件说明 1.121. Hyper-V 硬件需求 安装并使用Hyper-V 角色,需要满足以下条件 一个基于64位的处理器。Hyper-V 仅在64位Windows Server 2008 中可用 ----------------- 具体包括 64位的 Windows Server 2008 标准版、Windows Server 2008 企业版以及 Windows Server 2008 数据中心 版。Hyper-V 在32位(x86)版本的或基于安腾系统版本的 Windows Server 2008 不可用。虽然如 此,Hyper-V 管理工具仍然提供 32位版本。 硬件辅助虚拟化。这可用于包含了虚拟化选项的处理器一一具体来说,包括拥有In tel (Intel VT )或 AMD Virtualization (AMD-V 技术的处理器。 硬件强制数据执行保护 (DEP 必须可用并启动。具体来说,必须启用In tel XDbit ( execute disable bit )或 AMD NX bit (no execute bit )。 硬件辅助虚拟化以及硬件强制 DEP 在 BIOS 中设置。虽然如此,设定的名称可能与以上有所不同。 了解特定的处理器型号是否支持 Hyper-V ,请与计算机制造商进行联系。如果调整了硬件辅助虚拟 化和硬件强制 DEP 的设定,可能需要断开计算机电源,并重新开机。简单的重新启动可能无法使设 置生效。 1.1. 2.1.1. 内存 可以使用的最大内存数量由操作系统来决定。具体如下: 对于 Windows Server 2008 企业版和 Windows Server 2008 数据中心版来说,物理计算机可以配 置最多1 TB 物理内存,运行这些版本操作系统的虚拟机可以为每台虚拟机分配 Server 2008标准版来说,物理计算机可以配置最多 32 GB 物理内存,运行这些版本做系统的虚拟机可 以为每台虚拟机分配 31 GB 内存。 Virtualizati on Tech no logy 64 GB 内存。对于 Windows
基于T P C C的服务器性 能计算方法 The document was prepared on January 2, 2021
开发技术文档之 数据库服务器性能计算需求分析版本历史
一、数据库服务器性能计算需求分析 考虑到***公安局超级情报系统(SIS)设备升级项目的数据库服务器的性能,我们建议采用主流的TPC-C 值进行性能估算。 TPC-C 是一种旨在衡量联机事务处理(OLTP)系统性能与可伸缩性的行业 标准基准测试项目。这种基准测试项目将对包括查询、更新及队列式小批量事 务在内的广泛数据库功能进行测试。对于数据库密集型应用来说,TPC-C 被许多 IT 部门视为衡量真实OLTP 系统性能的有效指示器。 ***市公安局超级情报系统(SIS)设备升级项目未来的并发客户约为 5000,绝大多数应用属于联机事务处理(OLTP)性质。我们建议对数据库服务 器的性能进行如下测算: 为了方便计算数据库服务器的性能,我们约定: 1) 系统同时在线用户数为5000 人(U1); 2) 平均每个用户每分钟发出2 次业务请求(N1); 3) 系统发出的业务请求中,更新、查询、其它各占1/3; 4) 平均每次更新业务产生4 个事务(T1); 5) 平均每次查询业务产生4 个事务(T2); 6) 平均每次其它业务产生8 个事务(T3); 7) 一天内忙时的处理量为平均值的8 倍; 8) 经验系数为;(实际工程经验) 1
9) 考虑服务器保留50%的冗余; 服务器需要的处理能力为:TPC-C=U1*N1*(T1+T2+T3)/3*8*经验系数/冗余系数则服务器的处理性能估算为:TPC-C= 5000*2*(4+4+8)/3*8*= 1,365,333tpmC 情报系统数据库服务器关系到整个系统的稳定运行,考虑到高可靠性和高可用性,并注重设备的可扩展性和性价比,同时考虑满足5 年内业务系统的服 务能力,建议数据库服务器配置一台TPC-C 值不小 于150 万的高性能小型机服务器,用做该情报系统的核心数据库服务器。 本次我们建议新购1 台小型机,配置16 个CPU 及64GB 内存,用于该超级情报系统系统的核心数据库服务器。 系统建设方案业务用户行 为分析模型
服务器处理能力估算 1 【引题】 但凡写过技术方案的都知道,在技术方案最终落实到工程实施部署时,必须编制出当前解决方案需要部署的IT设备及环境,包括:需要的网络环境、端口、带宽、组网方式、网络安全保障措施;需配置的服务器设备性能、数量;需配置的存储数据存储设备、容量、存储速率;甚至还需考虑整个系统的备份设备容量、备份I/O数、速率、备份策略等。 严格说来,无论是系统厂商、集成公司、还是研究院、设计公司,在最终提供方案的硬件配置时,都应该以业务需求为依据、适当考虑客户业务的发展趋势和系统冗余,详细估算:当前业务需求对网络带宽、对处理能力、对数据存储容量的指标。因此,本文以自己的项目案例和经验为基础,简述计算机处理能力如何正确估算,供大家参考。 2 【性能评测标准】 众所周知,事务处理性能委员会的TPC-C标准,是测算和衡量计算机硬件设备性能的行业标准。随着B/S技术架构的大行其道,SPEC组织专门推出了针对Web服务器响应客户端Web访问请求的性能测算标准,即SPEC web系列。因此,如果是传统的基于事务处理模式的服务器,仍采用TPC-C的方式进行测算;如果是Web服务器,则需要采用SPEC web系列的标准进行测算。然而,很遗憾的看到,很多人在测算服务器性能时完全忽视这两种差别。 1.1 TPC-C标准 TPC-C基准是事务处理委员会建立的一个专门演示在线事务处理性能(OLTP)的性能基准,它的测量方法是为了使客户能够评估不同的在线事务处理系统的性能,这些事务进程于一个可控制的状态下在一个标准的数据库中运行。 TPC-C的事务处理是在一个9个表的数据库上实现的事务处理过程包括:更新、插入、删除、终止,以及对主和次级键的访问,每种事务处理95%的响应时间应小于或等于5秒,其中,库存水平的响应时间可以在60秒以内。TPC-C 值表示每分钟处理的标准事务量,单位是tpmC。 1.2 SPEC web标准 SPEC web99,WEB 服务器可以支持的并发接入数。SPECweb99 检测程序模拟客户通过慢Internet 连接,向Web 服务器发送HTTP 工作量请求。
服务器性能测试指标介绍 当前业界常见的服务器性能指标有: TPC-C TPC-E TPC-H SPECjbb2005 SPECjEnterprise2010 SPECint2006 及SPECint_rate_2006 SPECfp2006 及SPECfp_rate_2006 SAP SD 2-Tier LINPACK RPE2 一、TPC (Transaction Processing Performance Council) 即联机交易处理性能协会, 成立于1988年的非盈利组织,各主要软硬件供应商均参与,成立目标: 为业界提供可信的数据库及交易处理基准测试结果,当前发布主要基准测试为: TPC-C : 数据库在线查询(OLTP)交易性能 TPC-E : 数据库在线查询(OLTP)交易性能 TPC-H : 商业智能/ 数据仓库/ 在线分析(OLAP)交易性能 1.TPC-C测试内容:数据库事务处理测试, 模拟一个批发商的订单管理系统。实际衡量服务器及数据库软件处理在线查询交易处理(OLTP)的性能表现. 正规TPC-C 测试结果发
布必须提供tpmC值, 即每分钟完成多少笔TPC-C 数据库交易(TPC-C Transaction Per Minute), 同时要提供性价比$/tpmC。如果把TPC-C 测试结果写成为tpm, TPM, TPMC, TPCC 均不属正规。 2.TPC-E测试内容:数据库事务处理测试,模拟一个证券交易系统。与TPC-C一样,实际衡量服务器及数据库软件处理在线查询交易处理(OLTP)的性能表现。正规TPC-E测试结果必须提供tpsE值,即每秒钟完成多少笔TPC-E数据库交易(transaction per second),同时提供$/tpsE。测试结果写成其他形式均不属正规。 对比:TPC-E测试较TPC-C测试,在测试模型搭建上增加了应用服务器层,同时增加了数据库结构的复杂性,测试成本相对降低。截止目前,TPC-E的测试结果仅公布有50种左右,且测试环境均为PC服务器和windows操作系统,并无power服务器的测试结果。除此之外,TPC官方组织并未声明TPC-E取代TPC-C,所以,说TPC-E取代TPC-C并没有根据。 附TPC-C与TPC-E数据库结构对比 3.TPC-H测试内容:对大型数据仓库进行决策支持(decision support)的基准测试。TPC-H包含一组复杂的业务查询及修改操作,属于商业智能/数据仓库/在线分析(OLAP)
服务器能力测算 一、术语和定义 1.1、信息系统 由计算机、通信设备、处理设备、控制设备及其相关的配套设施构成,按照一定的应用目的和规则,对信息进行采集、加工、存储、传输、检索等处理的人机系统。 1.2、软硬件平台 指信息系统运行的环境,主要包括硬件(服务器、存储)和软件(操作系统、数据库和中间件)部分。 1.3、非安全区 即Internet,此区域允许外网用户随意访问。 1.4、安全区 内网,此区域通常不对外提供服务。 1.5、DMZ区 又称非军事区,介于非安全区与安全区之间,此区域按需对外网用户提供部分服务。 1.6、FC SAN 指采用光纤通道的存储区域网络,是一种将存储设备、连接设备和服务器集成在一个高速网络中的技术,SAN作为存储网络,与LAN网络隔离,主要承担数据存储任务。 1.7、 FC Switch 指光纤通道交换机,是一种高速的网络传输中继设备,以光纤作为传输介质,是组成FC SAN光纤存储网络的光纤交换机。 1.8、磁盘阵列 由多个容量较小、速度较慢的磁盘组合成一个磁盘组,以提升整体性能和存储空间。
1.9、虚拟机 指使用系统虚拟化技术,运行在一个隔离环境中、具有完整硬件功能的逻辑计算机系统。 1.10、负载均衡 分为硬件和软件负载均衡,软件负载均衡指通过将负载均衡软件安装在一台或多台服务器相应的操作系统上来实现负载均衡,硬件负载均衡是直接将负载均衡设备部署在服务器和外部网络之间,专门完成负载均衡任务。 1.11、关键应用系统 指对业务开展起核心的支撑作用的,对可靠性(Reliability)、可用性(Availability)和可服务性(Serviceability)等具有非常高要求的应用系统,如资产管理系统、营销管理系统、财务管理系统、人力资源系统、协同办公系统和综合管理系统。 1.12、非关键应用系统 指除关键应用系统外的应用系统。 1.13、TPC-C测试 指模拟一个批发商的订单管理系统进行数据库事务处理测试,主要衡量服务器及数据库软件处理在线查询交易处理(OLTP)的性能表现,正规 TPC-C 测试结果发布必须提供 tpmC值, 即每分钟完成多少笔 TPC-C (TPC-C Transaction Per Minute)数据库交易。 1.14、业务交易 在TPC-C估算法中,业务交易指的是用户的业务请求,用户每次查询、修改和删除操作均各算一次业务交易。 二、软硬件平台架构 1、网络从安全角度上分,一般分为DMZ区和安全区(内网),根据应用的用途、架构、功能,选择适合的网络环境。 2、DMZ区和安全区(内网)内各信息系统应按照相关信息安全等级保护的要求,依据分区、分级、分域的原则,进行安全域的划分,实现各安全域差异化的信息安全防护。 3、软件架构方面,对维护简单、不需要更新客户端的应用系统,建议采用Browser/Server(B/S)架构,对响应时间要求快、客户端操作界面复杂和有较多个性化要求的应用系统,可采用Client/Server(C/S)架构。
系统处理能力TPC估算方法 1 TPC 标准介绍 在对系统进行方案设计时, 通常会遇到下列问题: a) 配置什么样的服务器设备? b) 系统性能如何? c) 系统能够满足多长时间的应用? 单凭历史经验给出一个经验值来评估整套系统显然是不够的, 必须拿出足够的理 论证据来证明设计中已考虑到了上述问题。通常, 采用TPC 的基准测试来衡量硬件服务器的处理能力, 同时, 采用通用计算公式估算软件所需的处理能力。 1.1 TPC TPC 是由数10 家会员公司创建的非盈利组织,总部设在美国。该组织对全世界开放, 但迄今为止,绝大多数会员都是美、日和西欧的大公司。TPC 的成员主要是计算机软硬件厂家, 而非计算机用户, 它的功能是制定商务应用基准程序的标准规范、性能和价格度量, 并管理测试结果的发布。 TPC 的测试结果和出版物是开放的, 可以通过网站( http: //https://www.wendangku.net/doc/2e12678022.html,) 获取详细信息。IBM、NCR、HP、SUN 等国际著名服务器供应商均是TPC 会员,这些公司旗下的产品均会在网站上公布TPC 的测试结果。目前, 国内的工程项目中大量采用了上述公司制造的服务器类产品, 因而这些数据对于设计阶段的性能估算很有参考价值。至今, TPC 已经推出了4 套基准程序( TPC- A、TPC- B、TPC- C 和TPC- D) 。其中TPC- A 和TPC- B已经过时, 不再使用。TPC- C 是在线事务处理(OLTP) 的基准程序, TPC- D 是决策支持的基准程序。目前, 工程设计中常见的系统均为在线事务处理型( 包括BSS、OSS 和OA) , 因此TPC- C 基准测试是本文关注的重点。 1.2 TPC- C 基准测试 TPC- C 是一种旨在衡量OLTP 系统性能与可伸缩性的行业标准基准测试项目。这种基准测试项目将对包括查询、更新及队列式小批量事务在内的广泛数据库功能进行测试。许多数据专业设计人员将TPC- C视为衡量“真实”OLTP 系统性能的有效指示器。TPC- C 基准测试是对硬件处理能力的考核标准。TPC- C 通过模拟一个批发商的货物管理系统,衡量硬件服务器的性能指标( 查询、统计功能的执行效率) 。TPC 对具体的测试环境, 也做了详细的规定。 1.2.1 测试环境 批发公司有W个仓库, 每个仓库供应10 个地区, 其中每个地区为3 000 名顾客服务。每个仓库中有10 个终端, 每个终端用于一个地区。在运行时,10×W个终端操作员向公司的数据库发出5 类请求。 1.2.2 逻辑和流程 该系统需要处理的交易有以下几种。
读懂服务器性能指标 用户总希望有一种简单、高效的度量标准,来量化评价服务器系统,以便作为选型的依据。但实际上,服务器的系统性能很难用一两种指标来衡量。包括TPC、SPEC、SAP SD、Linpack和HPCC在内的众多服务器评测体系,从处理器性能、服务器系统性能、商业应用性能直到高性能计算机的性能,都给出了一个量化的评价指标。在如此多的标准中,用户该如何选择最适合自身应用环境的评价体系呢?这里,我们选择了应用面较广泛的TPC和SPEC,作一个深入介绍。 ■走出误区 深入TPC-C指标 TPC体系是影响最大的评测基准之一,尤其近两年,国内媒体对TPC指标的报道可谓海量。但有多少用户真正了解其中的含义呢?本文以TPC-C为例,让用户深入了解这项基准测试。 tpmC值在国内外被广泛用于衡量服务器系统的事务处理能力。但究竟什么是tpmC值呢?笔者曾向一些用户、专业媒体记者乃至某些国外大公司的技术人员问过这个问题,但回答的精确度与tpmC值的流行程度差异甚远。不少人将之误写为TPMC,甚至与TPC组织混为一谈。 TPC(Transactionprocessing Performance Council,事务处理性能委员会)是由数十家会员公司创建的非盈利组织,总部设在美国。TPC的成员主要是计算机软硬件厂家,而非计算机用户,其功能是制定商务应用基准程序的标准规范、性能和价格度量,并管理测试结果的发布。 TPC不给出基准程序的代码,而只给出基准程序的标准规范。任何厂家或其他测试者都可以根据规范,最优地构造出自己的测试系统(测试平台和测试程序)。为保证测试结果的完整性,被测试者(通常是厂家)必须提交给TPC一套完整的报告(Full Disclosure Report),包括被测系统的详细配置、分类价格和包含5年维护费用在内的总价格。该报告必须由TPC 授权的审核员核实(TPC本身并不做审计)。TPC在全球只有不到10名审核员,全部在美国。 TPC推出过11套基准程序,分别是正在使用的TPC-App、TPC-H、TPC-C、TPC-W,过时的TPC-A、TPC-B、TPC-D和TPC-R,以及因为不被业界接受而放弃的TPC-S(Server 专门测试基准程序)、TPC-E(大型企业信息服务测试基准程序)和TPC-Client/Server。而目前最为“流行”的TPC-C是在线事务处理(OLTP)的基准程序,于1992年7月完成,后被业界逐渐接受。 TPC-C使用三种性能和价格度量,其中性能由tpmC(transactions per minute,tpm)衡量,C指TPC中的C基准程序。它的定义是每分钟内系统处理的新订单个数。TPC-C还经常以系统性能价格比的方式体现,单位是$/tpmC,即以系统的总价格(单位是美元)/tpmC 数值得出。
服务器处理能力的估算 作者:成晓旭 1 【引题】 但凡写过技术方案的都知道,在技术方案最终落实到工程实施部署时,必须编 制出当前解决方案需要部署的IT设备及环境,包括:需要的网络环境、端口、 带宽、组网方式、网络安全保障措施;需配置的服务器设备性能、数量;需配 置的存储数据存储设备、容量、存储速率;甚至还需考虑整个系统的备份设备 容量、备份I/O数、速率、备份策略等。 严格说来,无论是系统厂商、集成公司、还是研究院、设计公司,在最终提供 方案的硬件配置时,都应该以业务需求为依据、适当考虑客户业务的发展趋势 和系统冗余,详细估算:当前业务需求对网络带宽、对处理能力、对数据存储 容量的指标。因此,本文以自己的项目案例和经验为基础,简述计算机处理能 力如何正确估算,供大家参考。 2 【性能评测标准】 众所周知,事务处理性能委员会的TPC-C标准,是测算和衡量计算机硬件设备性能的行业标准。随着B/S技术架构的大行其道,SPEC组织专门推出了针对Web服务器响应客户端Web访问请求的性能测算标准,即SPEC web系列。 因此,如果是传统的基于事务处理模式的服务器,仍采用TPC-C的方式进行测算;如果是Web服务器,则需要采用SPEC web系列的标准进行测算。然而,很遗憾的看到,很多人在测算服务器性能时完全忽视这两种差别。 1.1 TPC-C标准 TPC-C基准是事务处理委员会建立的一个专门演示在线事务处理性能(OLTP)的性能基准,它的测量方法是为了使客户能够评估不同的在线事务处理系统的 性能,这些事务进程于一个可控制的状态下在一个标准的数据库中运行。 TPC-C的事务处理是在一个9个表的数据库上实现的事务处理过程包括:更新、插入、删除、终止,以及对主和次级键的访问,每种事务处理95%的响应时间 应小于或等于5秒,其中,库存水平的响应时间可以在60秒以内。TPC-C值 表示每分钟处理的标准事务量,单位是tpmC。 1.2 SPEC web标准 SPEC web99,WEB 服务器可以支持的并发接入数。SPECweb99 检测程序模 拟客户通过慢Internet 连接,向Web 服务器发送HTTP 工作量请求。 SPEC Web2005,作为SPECweb99的继承者,SPECweb2005延续了SPEC 的传统测试的原理,通过多台客户机向服务器发出Http Get请求,请求调用
1.说明:服务器性能说明书
2.技术建议书 2.1.系统部署结构及软硬件配置 2.1.1.设备部署方案 常见的集团式部署方案有三种: ●集中式部署:目录数据与原文均集中在总部服务器中; ●分布式部署:目录数据与原文数据均分散在各个二级单位中存储,再由一套分布式全文检索系 统将全集团数据提供统一门户、统一权限的检索; ●混合式部署:目录数据集中存储在总部服务器中,电子文件存放在各个二级单位服务器中; XXXX根据本次项目需求与特点推举以纯B/S软件平台构成的集中式部署方案。 各种方案优点对比:
2.1.2.硬件说明 2.1.2.1.H yper-V硬件需求 安装并使用Hyper-V角色,需要满足以下条件: ●一个基于64位的处理器。Hyper-V仅在64位Windows Server 2008中可用——具体包括64位的 Windows Server 2008标准版、Windows Server 2008企业版以及Windows Server 2008数据中心版。Hyper-V在32位(x86)版本的或基于安腾系统版本的Windows Server 2008不可用。虽然如此,Hyper-V管理工具仍然提供32位版本。 ●硬件辅助虚拟化。这可用于包含了虚拟化选项的处理器——具体来说,包括拥有Intel Virtualization Technology(Intel VT)或AMD Virtualization(AMD-V)技术的处理器。 ●硬件强制数据执行保护(DEP)必须可用并启动。具体来说,必须启用Intel XD bit(execute disable bit)或AMD NX bit(no execute bit)。 ●硬件辅助虚拟化以及硬件强制DEP在BIOS中设置。虽然如此,设定的名称可能与以上有所不同。 了解特定的处理器型号是否支持Hyper-V,请与计算机制造商进行联系。如果调整了硬件辅助虚拟化和硬件强制DEP的设定,可能需要断开计算机电源,并重新开机。简单的重新启动可能无法使设置生效。 2.1.2.1.1.内存 可以使用的最大内存数量由操作系统来决定。具体如下: 对于Windows Server 2008企业版和Windows Server 2008数据中心版来说,物理计算机可以配置最多1 TB物理内存,运行这些版本操作系统的虚拟机可以为每台虚拟机分配64 GB内存。对于Windows Server 2008标准版来说,物理计算机可以配置最多32 GB物理内存,运行这些版本做系统的虚拟机可以为每台虚拟机分配31 GB内存。
一、 数据库服务器性能计算需求分析 考虑到市公安局超级情报系统(SIS)设备升级项目的数据库 服务器的性能,我们建议采用主流的 T PC-C 值进行性能估算。 TPC-C 是一种旨在衡量联机事务处理(OLTP )系统性能与可伸缩 性的行业标准基准测试项目。这种基准测试项目将对包括查询、更新 及队列式小批量事务在的广泛数据库功能进行测试。对于数据库密 集型应用来说,TPC-C 被许多 IT 部门视为衡量真实 OLTP 系统性能的 有效指示器。 市公安局超级情报系统(SIS)设备升级项目未来的并发客户 约为 5000,绝大多数应用属于联机事务处理(OLTP )性质。我们建 议对数据库服务器的性能进行如下测算: 为了方便计算数据库服务器的性能,我们约定: 1) 系统 同时在线用户数 2) 平均每个用户每分钟发出 2 次业务请求(N1); 3) 系统发出的业务请求中,更新、查询、其它各占 1/3; 4) 平均每次 5) 平均每 6) 平 7) 一天忙时的处理量为平均值的 8 倍; 8) 经验系数为 1.6;(实际工程经验)
1
9) 考虑服务器保留50%的冗余; 服务器需要的处理能力为:TPC-C=U1*N1*(T1+T2+T3)/3*8*经验系数/冗余系数 则服务器的处理性能估算为:TPC-C= 5000*2*(4+4+8)/3*8*1.6/0.5= 1,365,333tpmC 情报系统数据库服务器关系到整个系统的稳定运行,考虑到高可靠性和高可用性,并注重设备的可扩展性和性价比,同时考虑满足 5 年业务系统的服务能力,建议数据库服务器配置一台T PC-C 值不小 于150 万的高性能小型机服务器,用做该情报系统的核心数据库服务器。 本次我们建议新购1台小型机,配置16 个3.55GHz C PU 及64GB 存,用于该超级情报系统系统的核心数据库服务器。 系统建设方案业务用户 行为分析模型 根据以上业务模型,得出以下系统处理能力参数:
服务器TPMC值计算 TPC基准程序是用来测系统而不是测主机的 目标:系统性能评估结果< 主机性能评估结果 TPC已经推出了四套基准程序,被称为TPC-A、TPC-B、TPC-C和TPC-D。其中A和B已经过时,不再使用了。TPC-C是在线事务处理(OLTP)的基准程序,TPC-D是决策支持(Decision Support) 的基准程序。TPC即将推TPC-E,作为大型企业(Enterprise)信息服务的基准程序。 TPC-C是在线事务处理(OLTP)的基准程序,性能由TPC-C吞吐率衡量,单位是 tpmC(tpm,transactions per minute);C指TPC中的C基准程序。它的定义是每分钟内系统处理新订单个数。TPC-C还经常以系统性能价格比的方式体现,单位是$/tpmC,即以系统的总价格(单位是美元)/tpmC数值得出。每分钟内系统处理的新订单个数 以服务器为例。在很多厂家的TPC测试系统中,服务器的价格只是系统总价格的25%或更小,而硬盘的价格有可能占到总价格的30%以上,因为TPC-C要求被测系统必须保存180天的事务记录 根据TPC-C的标准,tpmC值是根据标准模型中New-Order事务的处理数目来计算的,一个New-Order事务由平均4-5个SQL语句处理完成,整个测试的执行过程中,New-Order处理占45%。 估算条件: 运行商2003年将达到250万用户数 每天每用户产生5张话单 分析过程: 每分钟处理:(用户数)250万*5/24/60 =9250 峰值处理: 9250*1.5 =11350 需执行约6个SQL语句,则估算一个话单汇总处理业务相当的TPC-C值为: 6*0.45/4 = 0.67Tpmc 话单汇总和分析的TPC-C 值要求满足: 11350* 0.67Tpmc =9300Tpmc 考虑25%的冗余(系统其它开销): 主机性能=9300Tpmc *1.25 =11000Tpmc 各位,我是因为查TPC-C从谷歌来到这个论坛的。第一次来,也很喜欢这里。看来又多了一个基地了。关于TPC-C值的计算我还有一些问题求助。 --------我这里有从TPC的官方网站上找到的资料,但是他的测试环境是满配置的情况下得出的,在我的方案里面从扩展性和主机具体应用考虑,客户希望我能给他当前配置下的TPC-C的数值。这个怎么换算?惯例还是公式?(我的计算对象包括PC-SERVER应用服务器和HP-动能SD小机,这两个的计算方法一样吗?)PS:这是我从网上查到的资料有关小机的数值估算的方法----表现主机性能的一个重要指标是TPC-C测试。TPC-C由独立的第三方机构TPC对各厂商主机的交易处理能力进行测试。由于进行此测试的主机大都采用多CPU、超大规模内存,数据库操作大都在内存中完成,因而,TPC-C主要是针对CPU和内存的处理能
服务器处理性能估算 系统的建设,必须满足未来5年业务发展和管理的需求,所以下面对服务器性能指标的估算,将以满足未来5年的需要为基准。 1. 数据库服务器 1.1 TPC-C值估算 约定: 系统同时在线用户数为100人(U1); 平均每个用户每分钟发出2次业务请求(N1); 系统发出的业务请求中,更新、查询、统计各占1/3; 平均每次更新业务产生3个事务(T1); 平均每次查询业务产生8个事务(T2); 平均每次统计业务产生13个事务(T3); 一天内忙时的处理量为平均值的5倍; 经验系数为1.6;(实际工程经验) 考虑服务器保留30%的冗余; 服务器需要的处理能力为: TPC-C=U1*N1*(T1+T2+T3)/3*3*经验系数/冗余系数 则数据库服务器的处理性能估算为: TPC-C= 100*2*(3+8+13)/3*5*1.6/0.7= 18,285 TPM 1.2. 内存估算 该服务器内存主要由操作系统占用内存、数据库系统占用内存、并发连接占用内存等几部分组成。 约定: 操作系统占用约400M内存空间; 数据库系统占用内存0.8GB; 每个并发连接占用5 M; 考虑服务器内存保留15%的冗余; 则服务器的内存估算为: Mem = (400M + 0.8GB + 100*5M) / (1-15%) = 2 GB
1.3. 存储容量估算 预算管理系统中存储着预算编制数据等资料信息以及日志等管理信息。 在已经考虑了数据冗余的前提下,约定: 每月有100个分局或部室编制预算; 每月每个分局或部室编制1次预算; 预算模板共含6000个预算指标; 每个预算指标含5条明细项目; 每条记录占用空间300B; 每月的预算数据存储容量需求:6000*5*100*500B=1.5G 每月的日志数据存储容量需求:0.1G 每月进行数据备份一次,数据存储容量需求:12*9G=108G 整年总共需用存储容量:12*1.5G+1.5G+12*0.1G+12*9G=20.7G+108G=128.7G 约定系统中预算编制数据等资料信息以及日志等管理信息在线保存5年(备份数据每年进行清除)则预算管理系统的存储容量估算为: 5*20.7G+108G =103.5G+108G=211.5G 1.4. 服务器安装软件 该服务器中将需要安装的软件如下: 操作系统为:Windows 2000 Server 数据库:Oracle 1.5. 建议配置 根据以上的性能指标建议数据库服务器标准配置如下: 应用名称功能描述数量说明 数据库服务器CPU:TPCC值应大于18,285 TPM 内存:2G及以上 硬盘:211.5GB以上(建议通过RAID5或镜像等方式进行数据备份) 以太网卡:100M及以上 参考一下: 数据库服务器性能TPC-C测算 每秒峰值:6,000个连接/秒,即主机处理峰值应能达到6,000连接/秒; 每个连接平均需要10个数据库访问,按照经验,每个数据库访问相当于服务器3-4tpm
服务器性能计算Prepared on 21 November 2021
1概述 xxxxx项目采用集中式部署(即所有的数据集中部署在总部服务器中),对于完成各功能服务器的性能,我们建议采用主流的TPC 值进行性能估算。 TPC-C是一种旨在衡量联机事务处理(OLTP,又称业务处理系统)系统性能与可伸缩性的行业标准基准测试项目。 tpmC((Transaction Per Minute): TPC-C每分钟的吞吐量,按有效TPC-C配置期间每分钟处理的平均交易次数测量,至少要运行12分钟。 服务器从处理能力上来讲,最重要的指标是业务处理过程中所需要的并行处理能力,这一指标通常都是通过衡量主机的tpmC值取得;其它对主机硬件性能上的需求还包括内存大小,以及对外连接的数据线路带宽。在计算主机所需要的tpmC、硬盘及带宽时,直接影响这些计算结果的因素包括:用户的业务模型(也可以用一定收敛比来表示)、所开展的业务种类、所开展业务的并行应用需求。这种基准测试项目将对包括查询、更新及队列式小批量事务在内的广泛数据库功能进行测试,因此对于数据库密集型应用来说,TPC-C 被许多IT 部门视为衡量真实OLTP 系统性能的有效指示器。 2接口服务器性能计算 接口服务器在xxxxx系统中起到承上启下的作用,与OA、门户等其他业务系统的数据交互都需要通过标准接口完成,因此接口服务器的性能及稳定性也是至关重要的。 xxxxx系统的接口服务器使用Tomcat搭建,根据经验单服务器上的 Tomcat 的整体理论处理能力1000-2000个用户并发连接。考虑到系统操作系统CPU使用率为 10%,因此系统整体负载不能高于70%。 根据tpmC标准是根据标准模型中New-Order事物的处理数目来计算的,一个New-Order事物由平均4-5个SQL语句处理完成,整个测试执行过程中New-Order 处理占45%。 为了方便计算接口服务器的性能,我们约定: 1) 系统注册用户数为 200000 人(U1); 2) 忙时集中并发系数为10%(B1);
当前业界常见的服务器性能指标有: TPC-C TPC-E TPC-H SPECjbb2005 SPECjEnterprise2010 SPECint2006 及 SPECint_rate_2006 SPECfp2006 及 SPECfp_rate_2006 SAP SD 2-Tier LINPACK RPE2 一、TPC (Transaction Processing Performance Council) 即联机交易处理性能协会, 成立于1988年的非盈利组织,各主要软硬件供应商均参与,成立目标: 为业界提供可信的数据库及交易处理基准测试结果,当前发布主要基准测试为: TPC-C : 数据库在线查询(OLTP)交易性能 TPC-E : 数据库在线查询(OLTP)交易性能 TPC-H : 商业智能 / 数据仓库 / 在线分析(OLAP)交易性能 1.TPC-C测试内容:数据库事务处理测试, 模拟一个批发商的订单管理系统。实际衡量服务器及数据库软件处理在线查询交易处理(OLTP)的性能表现. 正规TPC-C 测试结果发布必须提供 tpmC值, 即每分钟完成多少笔 TPC-C 数据库交易 (TPC-C Transaction Per Minute), 同时要提供性价比$/tpmC。如果把 TPC -C 测试结果写成为 tpm, TPM, TPMC, TPCC 均不属正规。 2.TPC-E测试内容:数据库事务处理测试,模拟一个证券交易系统。与TPC-C一样,实际衡量服务器及数据库软件处理在线查询交易处理(OLTP)的性能表现。正规TPC-E测试结果必须提供tpsE值,即每秒钟完成多少笔TPC-E数据库交易(transaction per second),同时提供$/tpsE。测试结果写成其他形式均不属正规。 对比:TPC-E测试较TPC-C测试,在测试模型搭建上增加了应用服务器层,同时增加了数据库结构的复杂性,测试成本相对降低。截止目前,TPC-E的测试结果仅公布有50种左右,且测试环境均为PC服务器和windows操作系统,并无pow er服务器的测试结果。除此之外,TPC官方组织并未声明TPC-E取代TPC-C,所以,说TPC-E取代TPC-C并没有根据。 附 TPC-C与TPC-E数据库结构对比
数据库服务器性能计算需求分析 考虑到广州市公安局超级情报系统(SIS)设备升级项目的数据库服务器的性能,我们建议采用主流的TPC-C 值进行性能估算。 TPC-C是一种旨在衡量联机事务处理(OLTP )系统性能与可伸 缩性的行业标准基准测试项目。这种基准测试项目将对包括查询、更 新及队列式小批量事务在内的广泛数据库功能进行测试。对于数据库 密集型应用来说,TPC-C被许多IT部门视为衡量真实OLTP系统性能的 有效指示器。 广州市公安局超级情报系统(SIS)设备升级项目未来的并发客 户约为5000 ,绝大多数应用属于联机事务处理(OLTP)性质。我们建议对数据库服务器的性能进行如下测算: 为了方便计算数据库服务器的性能,我们约定: 1)系统同时在线用户数为5000 人(U1 2)平均每个用户每分钟发出2 次业务请求(N1); 3)系统发出的业务请求中,更新、查询、其它各占1/3; 4)平均每次更新业务产生4 个事务(T1 5)平均每次查询业务产生4 个事务(T2 6)平均每次其它业务产生8 个事务(T3 7)一天内忙时的处理量为平均值的8 倍; 8)经验系数为1.6;(实际工程经验)
9)考虑服务器保留50 %的冗余; 服务器需要的处理能力为:TPC-C二U1*N1* (T1+T2+T3 )/3*8*经验系数/冗余系数 则服务器的处理性能估算为:TPC-C=5000*2*(4+4+8)/3*8*1.6/0.5二1,365,333tpmC 情报系统数据库服务器关系到整个系统的稳定运行,考虑到高可 靠性和高可用性,并注重设备的可扩展性和性价比,同时考虑满足5 年内业务系统的服务能力,建议数据库服务器配置一台TPC-C值不小 于150万的高性能小型机服务器,用做该情报系统的核心数据库服务器 本次我们建议新购1台小型机,配置16个3.55GHZCPU 及64GB 内存,用于该超级情报系统系统的核心数据库服务器。 系统建设方案业务用户 行为分析模型 根据以上业务模型,得出以下系统处理能力参数:
服务器处理能力,你估算正确过吗? 作者:成晓旭 1 【引题】 但凡写过技术方案的都知道,在技术方案最终落实到工程实施部署时,必须编制出当前解决方案需要部署的IT设备及环境,包括:需要的网络环境、端口、带宽、组网方式、网络安全保障措施;需配置的服务器设备性能、数量;需配置的存储数据存储设备、容量、存储速率;甚至还需考虑整个系统的备份设备容量、备份I/O数、速率、备份策略等。 严格说来,无论是系统厂商、集成公司、还是研究院、设计公司,在最终提供方案的硬件配置时,都应该以业务需求为依据、适当考虑客户业务的发展趋势和系统冗余,详细估算:当前业务需求对网络带宽、对处理能力、对数据存储容量的指标。因此,本文以自己的项目案例和经验为基础,简述计算机处理能力如何正确估算,供大家参考。 2 【性能评测标准】 众所周知,事务处理性能委员会的TPC-C标准,是测算和衡量计算机硬件设备性能的行业标准。随着B/S技术架构的大行其道,SPEC组织专门推出了针对Web服务器响应客户端Web访问请求的性能测算标准,即SPEC web系列。因此,如果是传统的基于事务处理模式的服务器,仍采用TPC-C的方式进行测算;如果是Web服务器,则需要采用SPEC web系列的标准进行测算。然而,很遗憾的看到,很多人在测算服务器性能时完全忽视这两种差别。 1.1 TPC-C标准 TPC-C基准是事务处理委员会建立的一个专门演示在线事务处理性能(OLTP)的性能基准,它的测量方法是为了使客户能够评估不同的在线事务处理系统的性能,这些事务进程于一个可控制的状态下在一个标准的数据库中运行。 TPC-C的事务处理是在一个9个表的数据库上实现的事务处理过程包括:更新、插入、删除、终止,以及对主和次级键的访问,每种事务处理95%的响应时间应小于或等于5秒,其中,库存水平的响应时间可以在60秒以内。TPC-C 值表示每分钟处理的标准事务量,单位是tpmC。 1.2 SPEC web标准
一、数据库服务器性能计算需求分析 考虑到广州市公安局超级情报系统(SIS)设备升级项目的数据库服务器的性能,我们建议采用主流的TPC-C值进行性能估算。 TPC-C是一种旨在衡量联机事务处理(OLTP)系统性能与可伸缩性的行业标准基准测试项目。这种基准测试项目将对包括查询、更新及队列式小批量事务在内的广泛数据库功能进行测试。对于数据库密集型应用来说,TPC-C被许多IT 部门视为衡量真实OLTP系统性能的有效指示器。 广州市公安局超级情报系统(SIS)设备升级项目未来的并发客户约为5000,绝大多数应用属于联机事务处理(OLTP)性质。我们建议对数据库服务器的性能进行如下测算: 为了方便计算数据库服务器的性能,我们约定: 1)系统同时在线用户数为5000人(U1); 2)平均每个用户每分钟发出2次业务请求(N1); 3)系统发出的业务请求中,更新、查询、其它各占1/3; 4)平均每次更新业务产生4个事务(T1); 5)平均每次查询业务产生4个事务(T2); 6)平均每次其它业务产生8个事务(T3); 7)一天内忙时的处理量为平均值的8倍; 8)经验系数为1.6;(实际工程经验) 9)考虑服务器保留50%的冗余; 服务器需要的处理能力为:TPC-C=U1*N1*(T1+T2+T3)/3*8*经验系数/冗余系数 则服务器的处理性能估算为:TPC-C= 5000*2*(4+4+8)/3*8*1.6/0.5= 1,365,333tpmC 情报系统数据库服务器关系到整个系统的稳定运行,考虑到高可靠性和高可
用性,并注重设备的可扩展性和性价比,同时考虑满足5年内业务系统的服务能力,建议数据库服务器配置一台TPC-C值不小于150万的高性能小型机服务器,用做该情报系统的核心数据库服务器。 本次我们建议新购1台小型机,配置16个3.55GHz CPU 及64GB内存,用于该超级情报系统系统的核心数据库服务器。
1.技术建议书 1.1. 系统部署结构及软硬件配置 1.1.1. 设备部署方案 常见的集团式部署方案有三种: 集中式部署:目录数据与原文均集中在总部服务器中; 分布式部署:目录数据与原文数据均分散在各个二级单位中存储,再由一套分布式全文检索系统将全集团数据提供统一门户、统一权限的检索; 混合式部署:目录数据集中存储在总部服务器中,电子文件存放在各个二级单位服务器中; XXXX根据本次项目需求与特点推举以纯B/S软件平台构成的集中式部署方案。 各种方案优点对比:
1.1. 2. 硬件说明 1.121. byper-V 硬件需求 安装并使用Hyper-V角色,需要满足以下条件: 一个基于64位的处理器。Hyper-V仅在64位Windows Server 2008 中可用---------- 具体包括64位的Windows Server 2008 标准版、Windows Server 2008 企业版以及Windows Server 2008 数据中心版。 Hyper-V在32位(x86)版本的或基于安腾系统版本的Windows Server 2008 不可用。虽然如此,Hyper-V管理工具仍然提供32位版本。 硬件辅助虚拟化。这可用于包含了虚拟化选项的处理器----------------- 具体来说,包括拥有Intel Virtualization Technology ( Intel VT )或AMD Virtualization ( AMD-V 技术的处理器。 硬件强制数据执行保护(DEP必须可用并启动。具体来说,必须启用In tel XDbit( execute disable bit )或AMD NX bit (no execute bit )。 硬件辅助虚拟化以及硬件强制DEP在BIOS中设置。虽然如此,设定的名称可能与以上有所不同。 了解特定的处理器型号是否支持Hyper-V ,请与计算机制造商进行联系。如果调整了硬件辅助虚拟 化和硬件强制DEP的设定,可能需要断开计算机电源,并重新开机。简单的重新启动可能无法使设置生效。 1.1. 2.1.1. 内存 可以使用的最大内存数量由操作系统来决定。具体如下: 对于Windows Server 2008 企业版和Windows Server 2008 数据中心版来说,物理计算机可以配 置最多1 TB物理内存,运行这些版本操作系统的虚拟机可以为每台虚拟机分配64 GB内存。对于Windows Server 2008标准版来说,物理计算机可以配置最多32 GB物理内存,运行这些版本做系统的虚拟机可 以为每台虚拟机分配31 GB内存。