一种国产JVM的测试评估方法

摘要

本发明公开了一种国产JVM的测试评估方法，该方法包括如下步骤：1、搭建测试环境；2、使用Jtreg测试JVM的功能；3、使用SpecJVM2008测试JVM基准性能；4、使用TPCW测试JVM集成系统性能；5、使用TPCW测试JVM稳定性。本发明具备的有益技术效果是：填补国产平台JVM测试方法空白，加速国产平台JVM发展进程，适用于各国产平台的JVM测试工具。

说明书

技术领域

本发明涉及一种测试评估方法，尤其涉及一种国产JVM的测试评估 方法。

背景技术

Java语言的一个非常重要的特点就是与平台的无关性。而使用JVM (Java Virtual Machine)是实现这一特点的关键，它使得Java语言在不同 平台上运行时不需要重新编译。JVM是一种用于计算设备的规范，它是 一个虚构出来的计算机，是通过在实际的计算机上仿真模拟各种计算机 功能来实现的。目前针对JVM测试通常是利用JVM测试工具，如Jtreg、 SPECJvm、JRockit等，通过设置参数，对JVM进行功能及性能测试，这 些工具虽然可以在一定程度上对JVM进行测试，但尚未形成一套系统的 测试评估方法。对于国产平台，更没有一套完整的JVM测试评估方法。

发明内容

本发明的目的在于提供一种国产JVM的测试评估方法，解决现有技 术存在的缺憾。

本发明采用如下技术方案实现：

一种国产JVM的测试评估方法，其特征在于，该方法包括如下步骤：

1、搭建测试环境：

1)Hotspot运行环境：

要在龙芯平台上运行Jtreg，首先需要对Hotspot进行编译，使其适用 于龙芯平台，步骤如下：

1a)设置环境变量，指定编译用的JDK：

export LANG=C ALT_BOOTDIR=／usr／lib/jvm／java-6-openjdk

1b)设置其他环境变量：

export ALLOW_DOWNLOADS=true，让ant可以自动下载所需的资 源)

export EXTRA_LIBS=／usr／lib／x86_64-linux-gnu／libasound.so.2，依赖 库配置。

1c)自检：make sanity；

1d)编译：make hotspot，编译结果为libjvm.so文件；

1e)将libjvm.so文件拷贝到jdk的相应目录下，通常为client目录下；

1f)运行Jtreg，执行测试；

2)：SpecJvm2008运行环境：

在龙芯平台上，编译好环境，SPECJVM2008包括纯解释模式和纯编 译模式，通过两种编译模式来测试JVM的性能情况，纯解释模式的命令 如下：Java-Xint-Xms800m-Xmx800m-jar SPECJVM2008.jar- peak-ikv，纯编译模式的命令如下：Java-Xcomp-Xms800m- Xmx800m-jar SPECJVM2008.jar-peak-ikv。

3)TPCW测试环境：

使用TPCW工具进行性能测试，需要搭建TPCW测试环境，主要包 括应用服务器和数据库服务器的搭建。

TPCW应用是指按交易处理性能委员会(TPC)的TPCW标准规范 开发的应用。TPCW模拟了一个网上书店，通过执行一系列具有代表性 的Web事务来模拟典型的电子商务环境。其功能包括书籍的浏览、查询、 订购等。

搭建测试环境所需配置如下：

2、使用Jtreg测试JVM的功能：在/jdk／jre／bin目录下，直接运行Jtreg， 当一个用例执行完成后，会在运行结束时自动生成结果，为了能够使Jtreg 自动运行自带的多个测试用例，通常在测试中引用Test工具目录，这样 对多个测试用例进行打包测试。当测试完成后会在当前目录自动生成 report目录，用户进入report目录可以查看每个用例的运行结果。

测试结果如下：

3、使用SpecJVM2008测试JVM基准性能：SPECJVM2008是一种 通用的多线程Java基准测试工具，它能够反映JRE(Java Runtime  Environment)运行Java的环境集合(包含JVM标准实现及Java核心类 库)性能表现。

运行.／run.Py-tjvm2008命令，执行测试；测试完成后生成xml文档， 结果中包括的性能进行测试有：JVM的编译时间、图片渲染时间、加密 算法时间、数据库相关逻辑、音频解码时间、Socket序列化、压缩程序 时间、XML转换、蒙特卡罗算法、快速傅立叶变换、LU分解，根据给 出的数据结果判断JVM的性能；

测试结果如下：

4、使用TPCW测试JVM集成系统性能，TPCW是TPC所制定的一 个基准(benchmark)，主要是用在交易型网络电子商务(transactional web  e-Commerce)上面，目的为测试系统的效能并给予量化。

通过TPCW基准测试工具，应用于网上书店模拟业务活动中，用户 可以按照自行的测试需求设置参数，参数包括：运行时间、并发用户数、 思考时间，设置好后，即可执行测试，用户可以打开jconsole、spotlight 等监测工具监测Jvm内存使用情况、CPU使用率、内存使用率、磁盘使 用率、网络吞吐量、连接数等，根据这些指标对测试情况进行综合分析。 并对TPCW模型中的14个基本事务执行情况进行分析，以找出系统瓶颈 所在。测试完成后，会生成测试报告。用户可根据结果中提供的WIPS(点 击率)、WIRT average(平均响应时间)、WIRT95％(95％用户的响应时间)、 complete session(事务完成数)、error session(事务失败率)来综合评判系统 的性能。

测试结果如下：

5、使用TPCW测试JVM稳定性：通过TPCW基准测试工具长时间 对系统施加压力，也可以测试JVM的稳定性。用户按照测试需求设置参 数，参数包括：运行时间、并发用户数、思考时间。

进一步的，一般并发用户数为设置为最大并发用户数的60％，运行 时间一般可设置24小时，3×24小时或5×24小时。按需求设置好后， 可执行稳定性测试。)

本发明具备的有益技术效果是：填补国产平台JVM测试方法空白， 加速国产平台JVM发展进程，适用于各国产平台的JVM测试工具。

附图说明

图1是国产JVM测试评估方法的应用示意图。

具体实施方式

通过下面对实施例的描述，将更加有助于公众理解本发明，但不能 也不应当将申请人所给出的具体的实施例视为对本发明技术方案的限制， 任何对部件或技术特征的定义进行改变和／或对整体结构作形式的而非 实质的变换都应视为本发明的技术方案所限定的保护范围。

一种国产JVM的测试评估方法，其特征在于，该方法包括如下步骤：

1、搭建测试环境：

1)Hotspot运行环境：

要在龙芯平台上运行Jtreg，首先需要对Hotspot进行编译，使其适用 于龙芯平台，步骤如下：

1a)设置环境变量，指定编译用的JDK：

export LANG=C ALT_BOOTDIR=／usr／lib/jvm／java-6-openjdk

1b)设置其他环境变量：

export ALLOW_DOWNLOADS=true，让ant可以自动下载所需的资 源)

export EXTRA_LIBS=／usr／lib／x86_64-linux-gnu／libasound.so.2，依赖 库配置。

1c)自检：make sanity；

1d)编译：make hotspot，编译结果为libjvm.so文件；

1e)将libjvm.so文件拷贝到jdk的相应目录下，通常为client目录下；

1f)运行Jtreg，执行测试；

2)SpecJvm2008运行环境：

在龙芯平台上，编译好环境，SPECJVM2008包括纯解释模式和纯编 译模式，通过两种编译模式来测试JVM的性能情况，纯解释模式的命令 如下：Java-Xint-Xms800m-Xmx800m-jar SPECJVM2008.jar- peak-ikv，纯编译模式的命令如下：Java-Xcomp-Xms800m- Xmx800m-jar SPECJVM2008.jar-peak-ikv。

3)TPCW测试环境：

使用TPCW工具进行性能测试，需要搭建TPCW测试环境，主要包 括应用服务器和数据库服务器的搭建。

TPCW应用是指按交易处理性能委员会(TPC)的TPCW标准规范 开发的应用。TPCW模拟了一个网上书店，通过执行一系列具有代表性 的Web事务来模拟典型的电子商务环境。其功能包括书籍的浏览、查询、 订购等。

搭建测试环境所需配置如下：

2、使用Jtreg测试JVM的功能：在/jdk／jre/bin目录下，直接运行Jtreg， 当一个用例执行完成后，会在运行结束时自动生成结果，为了能够使Jtreg 自动运行自带的多个测试用例，通常在测试中引用Test工具目录，这样 对多个测试用例进行打包测试。当测试完成后会在当前目录自动生成 report目录，用户进入report目录可以查看每个用例的运行结果。

测试结果如下：

3、使用SpecJVM2008测试JVM基准性能：SPECJVM2008是一种 通用的多线程Java基准测试工具，它能够反映JRE(Java Runtime  Environment)运行Java的环境集合(包含JVM标准实现及Java核心类 库)性能表现。

运行.／run.py-tjvm2008命令，执行测试；测试完成后生成xml文档， 结果中包括的性能进行测试有：JVM的编译时间、图片渲染时间、加密 算法时间、数据库相关逻辑、音频解码时间、Socket序列化、压缩程序 时间、XML转换、蒙特卡罗算法、快速傅立叶变换、LU分解，根据给 出的数据结果判断JVM的性能；

测试结果如下：

4、使用TPCW测试JVM集成系统性能，TPCW是TPC所制定的一 个基准(benchmark)，主要是用在交易型网络电子商务(transactional web  e-Commerce)上面，目的为测试系统的效能并给予量化。

通过TPCW基准测试工具，应用于网上书店模拟业务活动中，用户 可以按照自行的测试需求设置参数，参数包括：运行时间、并发用户数、 思考时间，设置好后，即可执行测试，用户可以打开jconsole、spotlight 等监测工具监测Jvm内存使用情况、CPU使用率、内存使用率、磁盘使 用率、网络吞吐量、连接数等，根据这些指标对测试情况进行综合分析。 并对TPCW模型中的14个基本事务执行情况进行分析，以找出系统瓶颈 所在。测试完成后，会生成测试报告。用户可根据结果中提供的WIPS(点 击率)、WIRT average(平均响应时间)、WIRT95％(95％用户的响应时间)、 complete session(事务完成数)、error session(事务失败率)来综合评判系统 的性能。

测试结果如下：

5、使用TPCW测试JVM稳定性：通过TPCW基准测试工具长时间 对系统施加压力，也可以测试JVM的稳定性。用户按照测试需求设置参 数，参数包括：运行时间、并发用户数、思考时间。

进一步的，一般并发用户数为设置为最大并发用户数的60％，运行 时间一般可设置24小时，3×24小时或5×24小时。按需求设置好后， 可执行稳定性测试。)

当然，本发明还可以有其他多种实施例，在不背离本发明精神及其 实质的情况下，熟悉本领域的技术人员可以根据本发明做出各种相应的 改变和变形，但这些相应的改变和变形都应属于本发明所附的权利要求 的保护范围。