• [技术干货] Jmeter 入门快速指南【转】
    jMeter - Overview在进入JMeter的细节之前,让我们先了解一些与任何应用程序测试相关的术语。Performance Test - 此测试在给定的基础架构配置下设置最佳性能预期。 如果在应用程序投入生产之前需要进行任何更改,它还会在测试过程的早期突出显示。Load Test - 此测试主要用于测试系统在其设计的最高负载下运行。Stress Test - 此测试试图通过压倒其资源来破坏系统。什么是JMeter?JMeter是一种可以在不同协议或技术上执行负载测试,面向性能的业务(功能)测试,回归测试等的软件。Apache Software Foundation的Stefano Mazzocchi是JMeter的原始开发人员。 他写这篇文章主要是为了测试Apache JServ(现在称为Apache Tomcat项目)的性能。 Apache后来重新设计了JMeter以增强GUI并添加功能测试功能。JMeter是一个Java桌面应用程序,具有使用Swing图形API的图形界面。 因此,它可以在任何接受Java虚拟机的环境/工作站上运行,例如Windows,Linux,Mac等。JMeter支持的协议是 -Web - HTTP,HTTPS站点'web 1.0'web 2.0(ajax,flex和flex-ws-amf)Web服务 - SOAP/XML-RPC数据库通过JDBC驱动程序目录 - LDAP通过JMS提供面向消息传递的服务服务 - POP3,IMAP,SMTPFTP服务JMeter功能以下是JMeter的一些功能 -作为一个开源软件,它是免费提供的。它具有简单直观的GUI。JMeter可以通过JDBC,LDAP,JMS,Mail-POP3等对许多不同的服它是一个独立于平台的工具。 在Linux/Unix上,可以通过单击JMeter shell脚本来调用JMeter。 在Windows上,可以通过启动jmeter.bat文件来调用它。它具有完整的Swing和轻量级组件支持(预编译的JAR使用包javax.swing。*)。JMeter以XML格式存储其测试计划。 这意味着您可以使用文本编辑器生成测试计划。其完整的多线程框架允许多个线程进行并发采样,并通过单独的线程组同时对不同函数进行采样。它具有很强的可扩展性。它还可用于执行应用程序的自动和功能测试。JMeter如何工作?JMeter模拟一组用户向目标服务器发送请求,并通过表,图表等返回显示目标服务器/应用程序的性能/功能的统计信息。看看下图描绘了JMeter的工作原理 -jMeter - EnvironmentJMeter是Java的框架,因此第一个要求是在您的机器中安装JDK。系统需求 (System Requirement)JDK1.6或以上。记忆没有最低要求。磁盘空间没有最低要求。操作系统没有最低要求。第1步 - 验证Java安装首先,验证您的系统中是否安装了Java。 打开控制台,根据您正在使用的操作系统执行以下java命令之一。OS任务命令Windows打开命令控制台c:\> java -versionLinux打开命令终端$ java -versionMac开放式终端机器:~joseph $ java -version如果您的系统中安装了Java,则可以根据您正在使用的操作系统获得适当的输出。OSOutputWindowsjava版“1.7.0_25”Java(TM)SE运行时环境(版本1.7.0_25-b15)Java HotSpot(TM)64位服务器VM(内置23.25-b01,混合模式)Linuxjava版“1.7.0_25”Java(TM)SE运行时环境(版本1.7.0_25-b15)Java HotSpot(TM)64位服务器VM(内置23.25-b01,混合模式)Macjava版“1.7.0_25”Java(TM)SE运行时环境(版本1.7.0_25-b15)Java HotSpot(TM)64位服务器VM(内置23.25-b01,混合模式)如果未安装Java,请从cid:link_0安装Java软件开发工具包(SDK)。 我们假设Java 1.7.0_25是本教程的已安装版本。第2步 - 设置Java环境将JAVA_HOME环境变量设置为指向计算机上安装Java的基本目录位置。 例如 -OSOutputWindows将环境变量JAVA_HOME设置为C:\Program Files\Java\jdk1.7.0_25Linuxexport JAVA_HOME =/usr/local/java-currentMacexport JAVA_HOME =/Library/Java/Home将Java编译器位置附加到系统路径。OSOutputWindows附加字符串; C:\Program Files\Java\jdk1.7.0_25\bin到系统变量Path的末尾。Linuxexport PATH = PATH:JAVA_HOME/bin/Mac不需要使用java -version命令验证Java安装,如上所述。第3步 - 下载JMeter从http://jmeter.apache.org/download_jmeter.cgi下载最新版本的JMeter。 在本教程中,我们下载了apache-jmeter-2.9并将其复制到C:\“JMeter文件夹中。目录结构应如下所示 -apache-jmeter-2.9apache-jmeter-2.9\binapache-jmeter-2.9\docsapache-jmeter-2.9\extrasapache-jmeter-2.9\lib\apache-jmeter-2.9\lib\extapache-jmeter-2.9\lib\junitapache-jmeter-2.9\printable_docs如果需要,可以重命名父目录(即apache-jmeter-2.9),但不要更改任何子目录名称。第4步 - 运行JMeter下载JMeter后,转到bin目录。 在这种情况下,它是/home/manisha/apache-jmeter-2.9/bin 。 现在点击以下 -OSOutputWindowsjmeter.batLinuxjmeter.shMacjmeter.sh短暂停顿后,应出现JMeter GUI,这是一个Swing应用程序,如下面的屏幕截图所示 -这是该工具的主页面和默认页面。jMeter - Build Test Plan什么是测试计划?可以将测试计划视为运行测试的容器。 它定义了要测试的内容以及如何进行测试。 完整的测试计划包含一个或多个元素,如线程组,逻辑控制器,样本生成控制器,监听器,计时器,断言和配置元素。 测试计划必须至少有一个线程组。编写测试计划按照下面给出的步骤编写测试计划 -步骤1 - 启动JMeter窗口单击/home/manisha/apache-jmeter-2.9/bin/jmeter.sh打开JMeter窗口。 JMeter窗口如下所示 -这是一个简单而空白的JMeter窗口,没有添加任何额外的元素。 它包含两个节点 -Test Plan node - 保存真实测试计划的地方。Workbench node - 它提供了一个临时存储测试元素而不使用的地方,用于复制/粘贴目的。 保存测试计划时,Workbench项目不会随之保存。第2步 - 添加/删除元素通过右键单击“测试计划”节点并从“添加”列表中选择一个新元素,可以将元素(将在下一章测试计划元素中讨论)添加到测试计划中。或者,您可以从文件加载元素并通过选择“合并”或“打开”选项来添加它。例如,让我们将一个Thread Group元素添加到测试计划中,如下所示 -要删除元素,请确保选中该元素,右键单击该元素,然后选择“删除”选项。第3步 - 加载并保存元素从文件加载元素 -右键单击要添加已加载元素的现有树元素。选择合并。选择保存元素的文件。JMeter会将元素合并到树中。默认情况下,JMeter不保存元素,您需要明确保存它。要保存树元素 -右键单击元素。选择Save Selection As ...选项。JMeter将保存所选元素以及其下的所有子元素。 默认情况下,JMeter不保存元素,您需要如前所述明确保存它。第4步 - 配置树元素可以使用JMeter右侧框架中的控件配置测试计划中的任何元素。 这些控件允许您配置该特定测试元素的行为。 例如,可以为多个用户配置线程组,增加周期等,如下所示 -第5步 - 保存测试计划您可以使用"Save Test Plan As ..."或"Save Test Plan As ..."文件”菜单中的"Save Test Plan As ..."来保存整个测试计划。第6步 - 运行测试计划您可以通过单击“ Run菜单项中的Run Start (Control + r)来运行“测试计划”。 当JMeter开始运行时,它会在菜单栏正下方部分的右端显示一个小绿框。绿色框左侧的数字是活动线程数/总线程数。 这些仅适用于本地运行的测试; 它们不包括使用客户端 - 服务器模式时在远程系统上启动的任何线程。第7步 - 停止测试计划您可以通过两种方式停止测试 -使用Stop (Control +'。')。 如果可能,它会立即停止线程。使用Shutdown (Control +',')。 它要求线程在任何当前工作结束时停止。jMeter - Test Plan ElementsJMeter测试计划包括下面讨论的测试元素。 测试计划包括至少一个线程组。 在每个线程组中,我们可以放置一个或多个其他元素的组合 - 采样器,逻辑控制器,配置元素,监听器和定时器。 每个采样器前面可以有一个或多个预处理器元素,后跟后处理器元素和/或断言元素。 让我们详细了解这些要素中的每一个 -线程组线程组元素是测试计划的起点。 顾名思义,线程组元素控制JMeter在测试期间将使用的线程数。 我们还可以通过线程组控制以下内容 -设置线程数设置加速时间设置测试迭代次数线程组控制面板看起来像这样 -线程组面板包含以下组件 -Action to be taken after a Sampler error - 如果在测试执行期间发生任何错误,您可以让测试 -Continue测试中的下一个元素Stop Thread以停止当前线程。完全Stop Test ,以防您在继续运行之前检查错误。Number of Threads - 模拟服务器应用程序的用户数或连接数。Ramp-Up Period定义JMeter使所有线程运行所需的时间。Loop Count - 定义执行测试的次数。Scheduler checkbox - 选择后,“计划程序配置”部分将显示在控制面板的底部。Scheduler Configuration - 您可以配置运行测试的开始和结束时间。控制器(Controllers)JMeter有两种类型的控制器 - Samplers和Logic Controllers 。Samplers采样器允许JMeter将特定类型的请求发送到服务器。 它们模拟来自目标服务器的页面的用户请求。 例如,如果需要在HTTP服务上执行POST,GET或DELETE,则可以添加HTTP请求采样器。一些有用的采样器是 -HTTP请求FTP请求JDBC请求Java请求SOAP/XML请求RPC请求以下屏幕截图显示了HTTP请求采样器控制面板 -逻辑控制器逻辑控制器允许您控制线程中采样器的处理顺序。 逻辑控制器可以更改来自其任何子元素的请求的顺序。 一些示例是 - ForEach Controller,While Controller,Loop Controller,IF Controller,Run Time Controller,Interleave Controller,Throughput Controller和Run Once Controller。以下屏幕截图显示了一个Loop Controller控制面板 -以下列表包含JMeter提供的所有逻辑控制器 -简单控制器循环控制器一次只有控制器交错控制器随机控制器随机顺序控制器吞吐量控制器运行时控制器如果控制器而控制器开关控制器ForEach Controller模块控制器包括控制器交易控制器录音控制器测试片段Test Fragment是一种特殊类型的元素,与Thread Group元素位于同一级别。 它与Thread Group的区别在于它不会被执行,除非它被Module Controller或Include_Controller引用。 此元素纯粹用于在测试计划中重复使用代码。Listeners监听器允许您以某些日志文件中的表格,图形,树或简单文本的形式查看采样器的结果。 当JMeter的采样器组件被执行时,它们提供对JMeter收集的有关测试用例的数据的可视访问。可以在测试的任何地方添加监听器,包括直接在测试计划下。 他们只会从等级或低于其等级的元素收集数据。 以下列表包括JMeter提供的所有监听器 -示例结果保存配置Graph Full ResultsGraph ResultsSpline Visualizer断言结果查看结果树汇总报告查看表格中的结果简单的数据编写者监控结果分布图(alpha)聚合图Mailer VisualizerBeanShell监听器总结报告Timers默认情况下,JMeter线程发送请求而不会在每个采样器之间暂停。 这可能不是你想要的。 您可以添加一个计时器元素,该元素允许您定义在每个请求之间等待的句点。以下列表显示了JMeter提供的所有计时器 -恒定时器高斯随机定时器统一随机定时器Constant Throughput Timer同步定时器JSR223 TimeBeanShell时间BSF TimePoisson Random Time以下屏幕截图显示了一个Constant Timer控制面板 -断言(Assertions)断言允许您对使用采样器发出的请求的响应包含一些验证测试。 使用断言可以证明您的应用程序正在返回正确的数据。 当断言失败时,JMeter会突出显示。以下列表包含JMeter提供的所有断言 -Beanshell断言BSF断言比较断言JSR223断言响应断言持续时间断言大小断言XML断言BeanShell断言MD5Hex断言HTML断言XPath断言XML Schema断言以下屏幕截图显示了响应断言控制面板 -配置元素配置元素允许您创建采样器使用的默认值和变量。 它们用于添加或修改采样器发出的请求。它们在它们所属范围的开始处执行,在位于相同范围内的任何采样器之前执行。 因此,只能从放置它的分支内部访问配置元素。以下列表包含JMeter提供的所有配置元素 -CounterCSV数据集配置FTP请求默认值HTTP授权管理器HTTP缓存管理器HTTP Cookie管理器HTTP代理服务器HTTP请求默认值HTTP标头管理器Java请求默认值密钥库配置JDBC连接配置登录配置元素LDAP请求默认值LDAP扩展请求默认值TCP采样器配置用户定义的变量简单的配置元素随机变量Pre-processor Elements预处理器元素就是在采样器执行之前运行的东西。 它们通常用于在运行之前修改样本请求的设置,或者更新未从响应文本中提取的变量。以下列表包含JMeter提供的所有预处理器元素 -HTML链接解析器HTTP URL重写修饰符HTTP用户参数修饰符用户参数JDBC预处理器JSR223预处理器RegEx用户参数BeanShell预处理器BSF预处理器Post-processor Elements后处理器在采样器完成执行后执行。 此元素通常用于处理响应数据,例如,检索特定值以供以后使用。以下列表包含JMeter提供的所有后处理器元素 -Regular Expression ExtractorXPath Extractor结果状态操作处理程序JSR223 PostProcessorJDBC PostProcessorBSF PostProcessorCSS/JQuery ExtractorBeanShell PostProcessor调试PostProcessor测试元素的执行顺序以下是测试计划元素的执行顺序 -配置元素Pre-ProcessorsTimersSampler后处理器(除非SampleResult为null)断言(除非SampleResult为null)监听器(除非SampleResult为null)jMeter - Web Test Plan让我们构建一个测试网页的简单测试计划。 我们在Apache JMeter中编写了一个测试计划,以便我们可以测试URL所显示的Web页面的性能 - http://www.iowiki.com/ 。启动JMeter单击/home/manisha/apache-jmeter-2.9/bin/jmeter.sh打开JMeter窗口。 JMeter窗口如下所示 -重命名测试计划在“ Name文本框中将测试计划节点的名称更改为“ Sample Test ”。 您需要将焦点更改为工作台节点并返回“测试计划”节点以查看反映的名称。添加线程组现在我们在窗口中添加第一个元素。 我们添加一个Thread Group,它是所有其他元素(如Samplers,Controllers和Listeners)的占位符。 我们需要一个,因此我们可以配置要模拟的用户数量。在JMeter中,使用上下文菜单添加所有节点元素。右键单击要添加子元素节点的元素。选择要添加的相应选项。右键单击Sample Test(我们的测试计划)> Add> Threads(Users)> Thread Group。 因此,线程组将添加到测试计划(样本测试)节点下。将线程组命名为Users 。 对我们来说,这个元素意味着访问IoWiki主页的用户。添加采样器我们需要在T​​hread Group(Users)中添加一个Sampler。 正如之前为添加Thread组所做的那样,这次我们将通过右键单击打开Thread Group(Users)节点的上下文菜单,我们将通过选择Add> Sampler> HTTP request选项添加HTTP Request Sampler。它将在Thread Group(Users)节点下添加一个空的HTTP Request Sampler。 让我们配置这个节点元素 -Name - 我们将更改名称以反映我们想要实现的操作。 我们将其命名为Visit IoWiki Home PageServer Name or IP - 在这里,我们必须键入Web服务器名称。 在我们的例子中,它是www.iowiki.com 。 (http://部分未写入,这只是服务器名称或其IP)Protocol - 我们将此保持为空,这意味着我们希望HTTP作为协议。Path - 我们将路径键入/(斜杠)。 这意味着我们需要服务器的根页面。添加监听器我们现在将添加一个监听器。 让我们在Thread Group(User)节点下添加View Results Tree Listener。 它将确保在此Listener节点元素中可以查看Sampler的结果。添加监听器 -打开上下文菜单右键单击线程组(用户)选择Add> Listener> View Results Tree选项运行测试计划现在有了所有设置,让我们执行测试计划。 通过线程组(用户)的配置,我们保留所有默认值。 这意味着JMeter只会执行一次采样器。 它类似于单个用户,只有一次。这类似于使用JMeter采样器通过浏览器访问网页的用户。 要执行测试计划,请从菜单中选择“运行”,然后选择“启动”选项。Apache JMeter要求我们在实际开始测试之前将测试计划保存在磁盘文件中。 如果您想多次运行测试计划,这一点很重要。 您可以选择运行它而不保存。查看输出我们将线程组的设置保持为单线程(仅一个用户)并循环一次(仅运行一次),因此我们将在View Result Tree Listener中获得一个事务的结果。上述结果的详情如下 -名称Visit IoWiki Home Page绿色表示成功。JMeter已经存储了Web服务器发送的所有标头和响应,并准备以多种方式向我们显示结果。第一个选项卡是Sampler Results。 它显示了JMeter数据以及Web服务器返回的数据。第二个选项卡是Request,它显示作为请求的一部分发送到Web服务器的所有数据。最后一个选项卡是响应数据。 在此选项卡中,侦听器以文本格式显示从服务器接收的数据。这只是一个只执行一个请求的简单测试计划。 但JMeter的真正优势在于发送相同的请求,就好像许多用户正在发送它一样。 要测试具有多个用户的Web服务器,我们需要更改“线程组(用户)”设置。jMeter - Database Test Plan在本章中,我们将了解如何创建一个简单的测试计划来测试数据库服务器。 为了我们的测试目的,我们使用MYSQL数据库服务器。 您可以使用任何其他数据库进行测试。 有关MYSQL中的安装和表创建,请参阅MYSQL教程 。安装MYSQL后,请按照以下步骤设置数据库 -创建一个名为“tutorial”的数据库。创建一个表tutorials_tbl 。将记录插入tutorials_tbl ,如下所示 -mysql> use TUTORIALS;Database changedmysql> INSERT INTO tutorials_tbl ->(tutorial_title, tutorial_author, submission_date) ->VALUES ->("Learn PHP", "John Poul", NOW());Query OK, 1 row affected (0.01 sec)mysql> INSERT INTO tutorials_tbl ->(tutorial_title, tutorial_author, submission_date) ->VALUES ->("Learn MySQL", "Abdul S", NOW());Query OK, 1 row affected (0.01 sec)mysql> INSERT INTO tutorials_tbl ->(tutorial_title, tutorial_author, submission_date) ->VALUES ->("JAVA Tutorial", "Sanjay", '2007-05-06');Query OK, 1 row affected (0.01 sec)mysql>12345678910111213141516171819将相应的JDBC驱动程序复制到/home/manisha/apache-jmeter-2.9/lib 。创建JMeter测试计划让我们从/home/manisha/apache-jmeter-2.9/bin/jmeter.sh启动JMeter。添加用户要创建一个Thread组,右键单击“测试计划”。选择“添加”>“线程(用户)”>“线程组”。因此,线程组将添加到“测试计划”节点下。将此线程组重命名为JDBC Users 。我们不会更改线程组的默认属性。添加JDBC请求现在我们定义了用户,现在是时候定义他们将要执行的任务了。 在本节中,指定要执行的JDBC请求。右键单击JDBC Users元素。选择“ Add 》 Config Element 》 JDBC Connection Configuration 。设置以下字段(我们使用名为tutorial的MySQL数据库) -绑定到池的变量名称。 这需要唯一地识别配置。 JDBC Sampler使用它来标识要使用的配置。 我们将其命名为test 。数据库URL - jdbc:mysql:// localhost:3306/tutorial。JDBC驱动程序类:com.mysql.jdbc.Driver。用户名:root。密码:root的密码。屏幕上的其他字段保留为默认值,如下所示 -现在添加一个JDBC请求,它引用上面定义的JDBC配置池。 选择JDBC Users元素。单击鼠标右键以获取“添加”菜单选择Add 》 Sampler 》 JDBC Request.选择此新元素以查看其控制面板。编辑属性,如下所示 -绑定到池的变量名称。 这需要唯一标识配置。 JDBC Sampler使用它来标识要使用的配置。 将其命名为test 。姓名 - 学习。输入池名称 - 测试(与配置元素中的相同)。查询类型 - 选择语句。输入SQL查询字符串字段。创建监听器现在添加Listener元素。 此元素负责将JDBC请求的所有结果存储在文件中,并呈现数据的可视化模型。选择JDBC Users元素添加视图结果树侦听器( Add 》 Listener 》 View Results Tree )。保存并执行测试计划现在将上述测试计划保存为db_test.jmx 。 使用Run 》 Start选项执行此测试计划。验证输出 (Verify the Output)在最后一张图像中,您可以看到选择了两条记录。jMeter - FTP Test Plan在本章中,我们将了解如何使用JMeter测试FTP站点。 让我们创建一个测试计划来测试FTP站点。重命名测试计划单击/home/manache/apache-jmeter-2.9/bin/jmeter.sh打开JMeter窗口单击“测试计划”节点。将此测试计划节点重命名为TestFTPSite。添加线程组添加一个Thread Group,它是所有其他元素(如Samplers,Controllers和Listeners)的占位符。右键单击TestFTPSite(我们的测试计划)选择“添加”>“线程(用户)”>“线程组”。 线程组将添加到测试计划(TestFTPSite)节点下。修改线程组的默认属性以适合我们的测试,如下所示 -Name - FTPusersNumber of Threads (Users) - 4Ramp-Up Period - 保留默认值0秒。Loop Count - 1添加采样器 - FTP请求现在我们已经定义了用户,现在是时候定义他们将要执行的任务了。 添加FTP请求元素。 我们添加了两个FTP请求元素,一个用于检索文件,另一个用于将文件放在ftp站点上。选择FTPusers元素。右键单击鼠标按钮以获取“添加”菜单选择添加>采样器> FTP请求。在树中选择FTP Request元素。编辑以下属性,如下所示 -在此元素中输入以下详细信息 -Name - FTP请求获取Server Name or IP - 184.168.74.29Remote File - /home/manisha/sample_ftp.txtLocal File - sample_ftp.txt选择get(RETR)Username - manishaPassword - manisha123现在添加上面的另一个FTP请求并编辑属性,如以下屏幕截图所示 -在此元素中输入以下详细信息 -Name - FTP请求放置Server Name or IP - 184.168.74.29Remote File - /home/manisha/examplefile.txtLocal File - /home/manisha/work/examplefile.txt选择放(STOR)Username - manishaPassword - manisha123添加监听器您需要添加到测试计划的最后一个元素是监听器。 此元素负责将FTP请求的所有结果存储在文件中,并呈现数据的可视化模型。选择FTPusers元素。选择“添加”>“侦听器”>“查看结果树”,添加“查看结果树”侦听器。运行测试计划现在将上述测试计划保存为ftpsite_test.jmx 。 使用Run 》 Start选项执行此测试计划。查看输出可以在侦听器中看到以下输出。您可以看到为每个FTP请求发出了四个请求,并且测试成功。 检索到的GET请求文件存储在/ bin文件夹中。 在我们的例子中,它是/home/manisha/apache-jmeter-2.9/bin/ 。 对于PUT请求,文件上传到路径/home/manisha/ 。jMeter - Webservice Test Plan在本章中,我们将学习如何创建测试计划以测试WebService。 出于测试目的,我们创建了一个简单的Web服务项目,并在本地将其部署在Tomcat服务器上。创建Webservice项目要创建Web服务项目,我们使用了Eclipse IDE。 首先在com.iowiki.ws包下编写服务端点接口HelloWorld 。 HelloWorld.java的内容如下 -package com.iowiki.ws;import javax.jws.WebMethod;import javax.jws.WebService;import javax.jws.soap.SOAPBinding;import javax.jws.soap.SOAPBinding.Style;//Service Endpoint Interface@WebService@SOAPBinding(style = Style.RPC)public interface HelloWorld{ @WebMethod String getHelloWorldMessage(String string);}123456789101112该服务有一个方法getHelloWorldMessage ,它接受一个String参数。接下来,在com.iowiki.ws包下创建实现类HelloWorldImpl.java 。package com.iowiki.ws;import javax.jws.WebService;@WebService(endpointInterface="com.iowiki.ws.HelloWorld")public class HelloWorldImpl implements HelloWorld { @Override public String getHelloWorldMessage(String myName){ return("Hello "+myName+" to JAX WS world"); }}12345678910现在让我们通过创建Endpoint发布者在本地发布此Web服务,并在服务器上公开该服务。发布方法有两个参数 -端点URL字符串。实现者对象,在本例中是HelloWorld实现类,它在上面参数中提到的URL标识的端点处作为Web服务公开。HelloWorldPublisher.java的内容如下 -package com.iowiki.endpoint;import javax.xml.ws.Endpoint;import com.iowiki.ws.HelloWorldImpl;public class HelloWorldPublisher { public static void main(String[] args){ Endpoint.publish("http://localhost:9000/ws/hello", new HelloWorldImpl()); }}123456789修改web.xml内容,如下所示 -<?xml version="1.0" encoding="UTF-8"?><!DOCTYPE web-app PUBLIC "-//Sun Microsystems, Inc.//DTD Web Application 2.3//EN" "http://java.sun.com/j2ee/dtds/web-app_2_3.dtd"><web-app> <listener> <listener-class> com.sun.xml.ws.transport.http.servlet.WSServletContextListener </listener-class> </listener> <servlet> <servlet-name>hello</servlet-name> <servlet-class> com.sun.xml.ws.transport.http.servlet.WSServlet </servlet-class> <load-on-startup>1</load-on-startup> </servlet> <servlet-mapping> <servlet-name>hello</servlet-name> <url-pattern>/hello</url-pattern> </servlet-mapping> <session-config> <session-timeout>120</session-timeout> </session-config></web-app>123456789101112131415161718192021222324要将此应用程序部署为Web服务,我们需要另一个配置文件sun-jaxws.xml 。 该文件的内容如下 -<?xml version="1.0" encoding="UTF-8"?><endpoints xmlns="http://java.sun.com/xml/ns/jax-ws/ri/runtime" version="2.0"> <endpoint name="HelloWorld" implementation="com.iowiki.ws.HelloWorldImpl" url-pattern="/hello"/></endpoints>12345现在所有文件都准备好了,目录结构看起来如下面的屏幕截图所示 -现在创建此应用程序的WAR文件。选择项目>右键单击>导出> WAR文件。将其保存为Tomcat服务器的webapps文件夹下的hello.war文件。现在启动Tomcat服务器。启动服务器后,您应该能够使用URL访问Web服务 - http:// localhost:8080/hello/hello创建JMeter测试计划现在让我们创建一个测试计划来测试上面的web服务。重命名测试计划单击/home/manisha/apache-jmeter2.9/bin/jmeter.sh打开JMeter窗口。单击“测试计划”节点。将此测试计划节点重命名为WebserviceTest。添加线程组添加一个Thread Group,它是所有其他元素(如Samplers,Controllers和Listeners)的占位符。右键单击WebserviceTest(我们的测试计划)>添加>线程(用户)>线程组。 线程组将添加到测试计划(WebserviceTest)节点下。接下来,让我们修改线程组的默认属性以适合我们的测试。 以下属性已更改 -Name - webservice用户Number of Threads (Users) - 2Ramp-Up Period - 保留默认值0秒。Loop Count - 2添加采样器 - SOAP/XML-RPC请求现在我们已经定义了用户,现在是时候定义他们将要执行的任务了。我们将添加SOAP/XML-RPC Request元素 -右键单击鼠标按钮以获取“添加”菜单。选择Add> Sampler> SOAP/XML-RPC Request。在树中选择SOAP/XML-RPC Request元素编辑以下属性,如下图所示 -在此元素中输入以下详细信息 -Name − SOAP/XML-RPC RequestURL - http:// localhost:8080/hello/hello?wsdlSoap/XML-RPC Data - 输入以下内容<soapenv:Envelope xmlns:soapenv="http://schemas.xmlsoap.org/soap/envelope/" xmlns:web="http://ws.iowiki.com/"> <soapenv:Header/> <soapenv:Body> <web:getHelloWorldMessage> <arg0>Manisha</arg0> </web:getHelloWorldMessage> </soapenv:Body></soapenv:Envelope>123456789添加监听器您需要添加到测试计划的最后一个元素是监听器。 此元素负责将HTTP请求的所有结果存储在文件中,并呈现数据的可视化模型。选择webservice用户元素。选择“添加”>“侦听器”>“查看结果树”,添加“查看结果树”侦听器。运行测试计划现在将上述测试计划保存为test_webservice.jmx 。 使用“运行”“启动”选项执行此测试计划。查看输出可以在侦听器中看到以下输出。在最后一张图片中,您可以看到响应消息“Hello Manisha to JAX WS world”。jMeter - JMS Test Plan在本章中,我们将学习如何编写一个简单的测试计划来测试Java Messaging Service(JMS)。 JMS支持两种类型的消息传递 -Point-to-Point messaging - 队列消息传递通常用于发送方期望响应的事务。 消息传递系统与普通HTTP请求完全不同。 在HTTP中,单个用户发送请求并获得响应。Topic messaging - 主题消息通常称为发布/订阅消息。 主题消息传递通常用于消息由生产者发布并由多个订阅者使用的情况。让我们看看每个这样的测试示例。 测试JMS的先决条件是 -我们在示例中使用Apache ActiveMQ。 有各种JMS服务器,如IBM WebSphere MQ(以前称为MQSeries),Tibco等。 从Apache ActiveMQ网站的二进制文件中下载它。解压缩归档文件,转到解压缩目录,然后从命令控制台运行以下命令以启动ActiveMQ服务器 -.\bin\activemq start12您可以通过访问位于以下地址http://localhost:8161/admin/的管理界面来验证ActiveMQ服务器是否已启动。 如果要求进行身份验证,请输入用户ID和密码作为admin 。 屏幕类似如下所示 -现在将activemq-all-xxxjar(XXX取决于版本)从ActiveMQ解压缩目录复制到/home/manisha/apache-jmeter-2.9/lib.通过上述设置,让我们为 - 构建测试计划 -JMS点对点测试计划JMS主题测试计划jMeter - Monitor Test Plan在本章中,我们将讨论如何使用JMeter创建测试计划来监控Web服务器。 监测测试的用途如下 -监视器对压力测试和系统管理很有用。与压力测试一起使用,监视器提供有关服务器性能的其他信息。监视器使您可以更轻松地查看服务器性能与客户端响应时间之间的关系。作为系统管理工具,监视器提供了一种从一个控制台监视多个服务器的简便方法。我们需要Tomcat 5或更高版本进行监控。 出于测试目的,我们将监控Tomcat 7.0.42服务器。 您可以测试任何支持Java Management Extension(JMX)的servlet容器。 让我们编写一个测试用例来监视Tomcat服务器。 我们首先设置我们的tomcat服务器。设置Tomcat服务器我们首先打开Tomcat服务状态。 为此,请编辑用户的配置文件《TOMCAT_HOME》/conf/tomcat-users.xml 。 该文件包含一个tomcat-users部分(注释),如图所示 -<tomcat-users><!-- <role rolename="tomcat"/> <role rolename="role1"/> <user username="tomcat" password="tomcat" roles="tomcat"/> <user username="both" password="tomcat" roles="tomcat,role1"/> <user username="role1" password="tomcat" roles="role1"/>--></tomcat-users>12345678910我们需要更改此部分以添加admin角色,manager,manager-gui并为用户分配“admin”。 修订后的文件如下 -<tomcat-users> <role rolename="manager-gui"/> <role rolename="manager-script"/> <role rolename="manager-jmx"/> <role rolename="manager-status"/> <user username="admin" password="admin" roles="manager-gui,manager-script,manager-jmx,manager-status"/></tomcat-users>12345678现在为Linux启动tomcat服务器 /bin/startup.sh,为Windows启动 /bin/startup.bat。 启动后,通过在浏览器中输入以下链接来检查Tomcat监管是否有效 -http://localhost:8080/manager/status?XML=true12验证窗口出现在浏览器中。 输入关联的tomcat登录名和密码(在我们的例子中是admin)。 然后,浏览器显示Tomcat的执行状态如下 -从上面的截图中,我们可以注意到一些事情 -在URL中,请注意XML = true (注意区分大小写)允许干净地显示JMeter运行所需的监督Tomcat。另请注意,默认有两个连接器。 通常使用的AJP连接器与mod_jk Apache HTTPD前端模块和HTTP连接器一起使用,HTTP连接器是通常用于通过端口8080直接访问Tomcat的连接器。编写JMeter测试计划让我们通过编写测试计划来监控Tomcat服务器 -重命名测试计划单击/home/manisha/apache-jmeter2.9/bin/jmeter.sh打开JMeter窗口。单击“测试计划”节点。按照下一步中的说明添加线程组。添加线程组右键单击Test Plan 》 Add 》 Threads(Users) 》 Thread Group 。 线程组将添加到“测试计划”节点下。将循环计数更改为永远(或一些大数),以便生成足够的样本。HTTP授权管理器通过选择“添加”>“配置元素”>“HTTP授权管理器”,将HTTP授权管理器添加到“线程组”元素。 此元素管理浏览器请求的身份验证,以查看Tomcat服务器状态。选择HTTP授权管理器。编辑以下详细信息 -Username - admin(取决于tomcat-users.xml文件中的配置)Password - admin(取决于tomcatusers.xml文件中的配置)其他字段留空。添加Sampler-HTTP请求现在我们已经定义了用户,现在是时候定义他们将要执行的任务了。 我们添加HTTP Request元素。右键单击鼠标按钮以获取“添加”菜单。选择添加>采样器> HTTP请求。然后,在树中选择HTTP Request元素。编辑以下属性,如下图所示 -在此元素中输入以下详细信息 -Name - 服务器状态Server Name or IP - localhostPort - 8080Path - /经理/状态Parameters - 以大写形式添加名为“XML”的请求参数。 以小写字母赋予值“true”。Optional Tasks - 选中采样器底部的“用作监视器”。添加一个恒定计时器要定期请求服务器的状态,请添加一个Constant Timer,它将允许每个请求之间的时间间隔。 通过选择Add> Timer> Constant Timer为该线程组添加一个定时器。在“ Thread Delay框中输入5000毫秒。 通常,使用短于5秒的间隔可能会给服务器增加压力。 在生产环境中部署监视器之前,请确定可接受的时间间隔。添加监听器您需要添加到测试计划的最后一个元素是监听器。 我们添加了两种类型的监听器。 一个将结果存储在文件中,另一个显示结果的图形视图。选择线程组元素。添加Simple Data Writer侦听器添加>侦听器>简单数据写入器。指定输出文件的目录和文件名(在我们的例子中,它是/home/manisha/work/sample.csv)让我们通过选择测试计划元素Add> Listener> Monitor Results来添加另一个监听器。运行测试计划现在将上述测试计划保存为monitor_test.jmx 。 使用“运行”“启动”选项执行此测试计划。查看输出结果将保存在/home/manisha/work/sample.csv文件中。 您还可以在Monitor结果监听器中看到图形结果,如下图所示。请注意,图表的两侧都有字幕。 左边是百分比,右边是死/健康。 如果内存线快速上升和下降,则可能表示内存抖动。 在这些情况下,最好使用Borland OptimizeIt或JProbe来分析应用程序。 您想要看到的是加载,内存和线程的常规模式。 任何不稳定的行为通常表示性能不佳或某种错误。jMeter - Listeners监听器提供对JMeter在JMeter运行时收集有关测试用例的信息的访问。 听众收集的结果或信息可以以下列形式显示:treetablesgraphs日志文件当指定一个侦听器时,所有侦听器都将相同的原始数据写入输出文件。默认配置要保存的默认项目可以通过以下两种方式之一定义 -在jmeter.properties (或user.properties)文件中。 此文件存在于JMeter的/bin文件夹中。要更改默认格式,请在jmeter.properties中找到以下行 -jmeter.save.saveservice.output_format=12通过使用Config弹出窗口,如下面的屏幕截图所示 -JMeter将测试运行的结果创建为JMeter文本日志(JTL)。 这些通常称为JTL文件,因为这是默认扩展名 - 但可以使用任何扩展名。如果使用相同的输出文件名运行多个测试,则JMeter会自动在文件末尾附加新数据。侦听器可以将结果记录到文件中,但不能记录到UI。 它旨在通过消除GUI开销来提供记录数据的有效方法。在运行时 -GUI mode - 使用侦听器Simple Data Writernon-GUI mode - -l标志可用于创建数据文件。如果有大量样本,听众可以使用大量内存。 要最小化所需的内存量,请使用CSV格式的简单数据写入。CSV日志格式CSV日志格式取决于配置中选择的数据项。 只有指定的数据项记录在文件中。 列的出现顺序是固定的,如下 -领域描述价值范例timeStamp自1970年1月1日以来的毫秒数1354223881017elapsed以毫秒为单位1858label采样器标签HTTP请求responseCode例如200,404200responseMessage好的OKthreadName线程组1-1dataType例如文字textsuccess对或错truefailureMessage如果有的话bytes样本中的字节数34908grpThreads此线程组中的活动线程数1allThreads所有组中活动线程的总数1URLhttp://iowiki.comFilename如果使用保存响应文件latency第一次回应的时间132encodingutf-8SampleCount样本数量(1,除非聚合多个样本)1ErrorCount错误数量(0或1,除非聚合多个样本)0Hostname样本生成的地方LaptopManishaIdleTime'空闲'时间的毫秒数(通常为0)Variables如果指定保存响应数据如果需要,响应数据可以保存在XML日志文件中。 但是它不允许保存大文件和图像。 在这种情况下,请使用后处理器Save_Responses_to_a_file。 这将为每个样本生成一个新文件,并使用该样本保存文件名。 然后,文件名可以包含在示例日志输出中。 如果需要重新加载样本日志文件,将从文件中检索数据。Loading (reading) response data要查看现有结果文件,可以使用文件“浏览...”按钮选择文件。 如有必要,只需创建一个带有相应Listener的虚拟测试计划。保存监听器GUI数据JMeter能够将任何侦听器保存为PNG文件。 为此,选择“编辑”>“另存为图像”,在左侧面板中选择侦听器。 出现文件对话框。输入所需的名称。保存监听器。jMeter - 函数JMeter函数和用户变量JMeter函数是特殊值,可以填充测试树中任何Sampler或其他元素的字段。函数调用看起来像这样 -${__functionName(var1,var2,var3)}12_functionName匹配函数的名称。 例如${__threadNum} 。如果函数参数包含逗号,请确保使用“\”进行转义,如下所示 -${__time(EEE\, d MMM yyyy)}12变量引用为 -${VARIABLE}12功能列表 (List of Functions)下表列出了一组松散地分为类型的函数 -功能类型名称评论InformationthreadNum获取线程编号。InformationsamplerName获取采样器名称(标签)。InformationmachineIP获取本地计算机的IP地址。InformationmachineName获取本地计算机名称。Informationtime以各种格式返回当前时间。Informationlog记录(或显示)消息(并返回值)。Informationlogn记录(或显示)消息(空返回值)。InputStringFromFile从文件中读取一行。InputFileToString阅读整个文件。InputCSVRead从CSV分隔文件中读取。InputXPath使用XPath表达式从文件中读取。Calculationcounter生成递增数字。CalculationintSum添加int数字。CalculationlongSum添加长号。CalculationRandom生成一个随机数。CalculationRandomString生成随机字符串。CalculationUUID生成随机类型4 UUID。ScriptingBeanShell运行BeanShell脚本。ScriptingjavaScript处理JavaScript(Mozilla Rhino)。Scriptingjexl, jexl2评估Commons Jexl表达式。Propertiesproperty阅读一处房产。PropertiesP阅读一个属性(速记方法)。PropertiessetProperty设置JMeter属性。Variablessplit将字符串拆分为变量。VariablesV评估变量名称。Variableseval评估变量表达式。VariablesevalVar评估存储在变量中的表达式。StringregexFunction使用正则表达式解析先前的响应。StringescapeOroRegexpChars引用ORO正则表达式使用的元字符。Stringchar从数字列表生成Unicode char值。Stringunescape包含Java转义的进程字符串(例如\ n&\ t)。StringunescapeHtml解码HTML编码的字符串。StringescapeHtml使用HTML编码对字符串进行编码。StringTestPlanName返回当前测试计划的名称。有两种功能 -用户定义的静态值(或变量)内置功能用户定义的静态值允许用户在编译并提交运行测试树时定义要用其静态值替换的变量。变量不能嵌套; 即${Var${N}}不起作用。__V(变量)函数(2.2之后的版本)可用于执行此操作 - $ {__ V(Var $ {N})}。这种类型的替换可以在没有功能的情况下进行,但是不太方便且不太直观。在哪里使用函数和变量函数和变量可以写入任何测试组件的任何字段。以下功能应该可以在测试计划中正常运行 -intSumlongSummachineNameBeanShelljavaScriptjexlrandomtimeproperty functions日志功能测试计划中使用的功能有一些限制。 处理函数时,JMeter线程变量尚未完全设置,因此不会设置作为参数传递的变量名称,并且变量引用将不起作用。 因此, split()和regex()以及变量评估函数将不起作用。 threadNum()函数不起作用,在测试计划级别没有意义。引用变量和函数 (Referencing Variables and Functions)通过将变量名称括在'$ {'和'}'中来引用测试元素中的变量。函数以相同的方式引用,但按照惯例,函数名称以“__”开头,以避免与用户值名冲突。有些函数使用参数来配置它们,这些函数用括号括起来,用逗号分隔。 如果函数不带参数,则可以省略括号。 例如 -${__BeanShell(vars.put("name"\,"value"))}12或者,您可以将脚本定义为变量,例如在测试计划中 -SCRIPT vars.put("name","value")12然后可以引用该脚本如下 -${__BeanShell(${SCRIPT})}12功能助手对话框函数助手对话框可从JMeter的Options卡中获得。使用Function Helper,您可以从下拉列表中选择一个函数,并为其参数赋值。 表中的左列提供了参数的简要描述,右列是您为该参数写入值的位置。 不同的功能有不同的论点。完成此操作后,单击“生成”按钮,将生成相应的字符串,您可以将其复制粘贴到测试计划中的任何位置。Pre-defined Variables一些变量由JMeter在内部定义。 他们是 -COOKIE_cookiename - 包含cookie值。JMeterThread.last_sample_ok - 最后一个样本是否正常 - 是/否。 注意 - 在运行PostProcessors和Assertions后更新。START变量。Pre-defined Properties一些内置属性由JMeter定义。 这些列在下面。 为方便起见,START属性也会复制到具有相同名称的变量。START.MS - JMeter开始时间(以毫秒为单位)。START.YMD - JMeter的开始时间为yyyyMMdd。START.HMS - JMeter开始时间为HHmmss。TESTSTART.MS - 以毫秒为单位测试开始时间。请注意,START变量/属性表示JMeter启动时间,而不是测试开始时间。 它们主要用于文件名等。jMeter - Regular Expressions正则表达式用于根据模式搜索和操作文本。 JMeter通过包含模式匹配软件Apache Jakarta ORO来解释整个JMeter测试计划中使用的正则表达式或模式的形式。通过使用正则表达式,我们可以在创建或增强测试计划时节省大量时间并获得更大的灵活性。 正则表达式提供了一种在不可能或很难预测结果时从页面获取信息的简单方法。使用表达式的标准用法示例是从服务器响应中获取会话ID。 如果服务器返回唯一的会话密钥,我们可以使用加载脚本中的表达式轻松获取它。要在测试计划中使用正则表达式,需要使用JMeter的正则表达式提取器。 您可以将正则表达式放在测试计划的任何组件中。值得强调的是,在响应断言测试元素上使用的contains和matches之间的区别 -contains表示正则表达式至少与目标的某些部分匹配,因此'alphabet'“包含”'ph.b.' 因为正则表达式匹配子字符串'phabe'。matches表示正则表达式与整个目标匹配。 因此''字母'与'al。* t'“匹配”。假设您要匹配网页的以下部分 -name="file" value="readme.txt" 12并且您想要提取readme.txt。 一个合适的正则表达式是 -name="file" value="(.+?)">12上面的特殊字符是 -(和) - 这些包含要返回的匹配字符串的部分. - 匹配任何角色+ - 一次或多次? - 第一场比赛成功时停止创建JMeter测试计划让我们通过编写测试计划来理解正则表达式提取器 - 后处理器元素中正则表达式的使用。 此元素使用正则表达式从当前页面提取文本,以标识所需元素符合的文本模式。首先,我们编写一个HTML页面,其中列出了人员及其电子邮件ID。 我们将它部署到我们的tomcat服务器。 html(index.html)的内容如下 -<html> <head> </head> <body> <table style="border: 1px solid #000000;"> <th style="border: 1px solid #000000;">ID</th> <th style="border: 1px solid #000000;">name</th> <th style="border: 1px solid #000000;">Email</th> <tr> <td id="ID" style="border: 1px solid #000000;">3</td> <td id="Name" style="border: 1px solid #000000;">Manisha</td> <td id="Email" style="border: 1px solid #000000;">manisha@domain.com</td> </tr> <tr> <td id="ID" style="border: 1px solid #000000;">4</td> <td id="Name" style="border: 1px solid #000000;">joe</td> <td id="Email" style="border: 1px solid #000000;">joe@domain.com</td> </tr> </table> </body></html>12345678910111213141516171819202122在tomcat服务器上部署它时,此页面将如下面的屏幕截图所示 -在我们的测试计划中,我们将选择在上面的人员列表页面中看到的人员表的第一行中的人。 要捕获此人的ID,让我们首先确定我们将在第二行中找到该人的模式。从下面的快照中可以看出,第二个人的ID被和 td>包围,它是具有这种模式的第二行数据。 我们可以使用它来匹配我们想要从中提取信息的确切模式。 由于我们想从这个页面提取两条信息,人员ID和人名,这些字段定义如下 - 启动JMeter,添加一个线程组Test Plan 》 Add》 Threads(Users)》 Thread Group 。接下来添加一个采样器HTTP请求,选择测试计划,右键单击Add 》 Sampler 》 HTTP Request并输入详细信息,如下所示 -Name - 管理Server Name or IP - localhostPort Number - 8080Protocol - 我们将此保持为空,这意味着我们希望HTTP作为协议。Path - jmeter/index.html接下来,添加正则表达式提取器。 选择HTTP Request Sampler(Manage),右键单击Add 》 Post Processor 》 Regular Expression Extractor 。下表提供了上述屏幕截图中使用的字段的说明 -在我们的例子中,表达式是 - 领域描述参考名称将存储提取的测试的变量的名称(refname)。正则表达式要提取的文本将与之匹配的模式。 将提取的文本组由字符'('和')'括起来。 我们用'。+?' 指示.. td>标记所包含的文本的单个实例。(+?) td>\s *(+?) td>\s *Template每组提取的文本作为变量Person的成员放置,遵循由'('和')'包围的每组模式的顺序。 每个组都存储为refname_g#,其中refname是您输入的字符串作为引用名称,#是组号。 1表示组1,2表示组2等。0 表示整个表达式匹配的任何内容。 在此示例中,我们提取的ID保留在Person_g1中,而Name值保存在Person_g2中。比赛号码由于我们计划仅提取此模式的第二次出现,匹配第二个志愿者,我们使用值2.值0将进行随机匹配,而负值需要与ForEach控制器一起使用。Default如果找不到该项,则这将是默认值。 这是个可选的选项。 你可以留空。添加侦听器以捕获此测试计划的结果。 右键单击“线程组”,然后选择“添加”>“侦听器”>“查看结果树”选项以添加侦听器。将测试计划保存为reg_express_test.jmx并运行测试。 输出将成功,如以下屏幕截图所示 -jMeter - Best PracticesJMeter有一些限制,特别是在分布式环境中运行时。 遵循这些准则将有助于创造真实和持续的负荷 -使用多个JMeter实例,以防线程数更多。检查范围规则并相应地进行设计。始终对所有元素使用命名约定。在执行脚本之前,请检查默认浏览器连接设置。适当添加听众。以下是减少资源需求的一些建议 -使用非GUI模式:jmeter -n -t test.jmx -l test.jtl。使用尽可能少的听众; 如果使用上面的-l标志,则可以删除或禁用它们。禁用“查看结果树”侦听器,因为它占用大量内存并可能导致控制台冻结或JMeter内存不足。 但是,使用“查看结果树”监听器并且只选中“错误”是安全的。而不是使用大量类似的采样器,在循环中使用相同的采样器,并使用变量(CSV数据集)来改变样本。 或者也许使用Access Log Sampler。不要使用功能模式。使用CSV输出而不是XML。仅保存您需要的数据。使用尽可能少的断言。禁用所有JMeter图,因为它们占用大量内存。 您可以使用Web界面中的JTL选项卡查看所有实时图形。如果使用,请不要忘记从CSV数据集配置中删除本地路径。每次测试运行前都要清理“文件”选项卡。
  • [技术干货] 黑盒测试与白盒测试
    前言在软件开发过程中,确保软件的质量和稳定性是非常重要的。为了达到这个目的,测试是不可或缺的环节。在测试的领域里,黑盒测试和白盒测试是两种主要的方法。这两种方法在目的、实施方式和结果上有显著的区别。一、黑盒测试黑盒测试,也被称为功能测试,主要关注的是软件的功能和其输出的结果。在黑盒测试中,测试者不关心软件的内部结构或实现方式,只关注软件输入和输出之间的关系。这种测试的目标是确保软件的功能按照预期工作,并且满足用户的需求。常见的黑盒测试方法包括:等价类划分:这种方法将输入的数据划分为若干个等价类,每个等价类中数据的测试效果相同。边界值分析:这种方法关注的是输入数据的最小值、最大值、上界和下界。因果图:这种方法使用图来描述输入和输出之间的关系。二、白盒测试白盒测试,也被称为结构测试或透明盒测试,更深入地考虑了软件的内部结构和实现。在白盒测试中,测试者需要了解软件的内部逻辑和代码结构,以便能设计出针对这些结构的测试用例。这种测试的目标是确保软件的内部逻辑和结构是正确的,以及代码的质量和稳定性。常见的白盒测试方法包括:路径覆盖:这种方法试图覆盖程序的所有可能路径。决策覆盖:这种方法关注的是程序中的决策点,确保所有可能的决策结果都得到了测试。条件覆盖:这种方法尝试覆盖程序中的所有条件表达式,包括真和假的情况。三、黑盒测试与白盒测试的区别关注点不同:黑盒测试关注软件的功能和用户需求,而白盒测试关注软件的内部逻辑和结构。实施者不同:一般来说,黑盒测试的实施者更偏向于业务人员或非技术人员,而白盒测试的实施者通常是开发人员或具有相关技术背景的测试人员。操作难度不同:黑盒测试的操作相对简单,通常不需要深入了解代码结构和实现。而白盒测试需要深入了解代码逻辑,设计复杂的测试用例。目的不同:黑盒测试的主要目的是确保软件的功能满足用户需求,而白盒测试的主要目的是提高代码质量和减少潜在的错误。资源消耗不同:通常,白盒测试需要更多的时间和资源,因为需要设计和执行更复杂的测试用例。适用阶段不同:黑盒测试通常在软件开发的后期进行,当软件的主要功能已经完成时。而白盒测试可以在开发的早期阶段就开始进行,甚至在编码过程中就可以进行单元测试。结果反馈不同:黑盒测试的结果通常提供给用户或者业务人员,用于了解软件的功能是否满足需求。而白盒测试的结果通常提供给开发人员,用于了解代码的质量和潜在问题。通过以上对比,我们可以看到黑盒测试和白盒测试各自的特点和差异。在实际的软件开发过程中,通常会结合使用这两种方法,以确保软件的质量和稳定性。
  • [分享交流] OD机考与相关讨论
    部门捞人 武汉 深圳 南京 上海办公地通道:点击通道2字复制浏览器重新打开也可以值得考虑OD情况:1)毕业3年内,编程水平、项目经验比较薄弱,没有什么拿得出手的项目经历获得更好机会,希望借助华为平台快速获得核心项目经验,提升市场竞争力;2)工作3年以上,现工作薪资待遇、技术提升空间、业务稳定性等比较一般,渴望突破;3)有一定相关基础或经验,渴望获得职业转型机会(如非计算机科班专业背景转行);4)有大厂情节,比较向往华为,但目前个人能力未能达到社招正编要求,希望通过OD模式转华为。机考TipsOD机考分值构成:正式机考有3题,150分钟,满分400(100+100+200的分值;简单+简单+中等难度的题型),按用例通过比例评分,合理安排每题时间与策略,通过为主,尽量高分。注意练习字符串,线性表,队列,栈,哈希表等。选择自己熟悉的语言考,每题都有test case 算每题分数总和为总分,所以如果前面难的话跑过部分用例可以先做后面的。题型:三道题是简单+简单+中等难度的题型。第一二题可能会是循环、数组、字符串、栈这些,第三题会难一点,二分查找、动态规划、DFS、BFS这些。可多刷一下leetcode网的典型练习题目考试注意事项:(1)考试时允许使用草稿纸,请提前准备纸笔。考试过程中允许上厕所等短暂离开,但请控制离开时间;(2)考试支持本地IDE,编码后复制黏贴至考试页面,不做跳出限制,但跳出访问浏览器搜索考试相关内容则会在成绩报告中标识为作弊嫌疑,成绩将取消;考试需要打开开启摄像头,否则成绩无效;(3)考试期间如遇到断电、断网、死机等问题,可以关闭浏览器重新打开试卷链接即可继续做题,如重启之后无法作答,请将情况反馈到招聘专员;(4)正式机考邮件下发后,需在7天内完成,超时将失效,请合理安排时间。考试链接一经打开,即视作已参加机考;面试流程1)机考2)综测 类似于职业性格测试3)技面×2 围绕计算机/编程基础+项目经验+代码能力进行考察4)HR面 围绕求职动机、稳定性、薪酬期望、Gap经历、延毕等异常情况进行考察5)主管面 围绕综合素质如沟通表达能力、培养潜力、团队/业务匹配度、项目经验等进行考察
  • [技术干货] 吞吐率、吞吐量、TPS、性能测试
    一、吞吐率我们一般使用单位时间内服务器处理的请求数来描述其并发处理能力。称之为吞吐率(Throughput),单位是 “req/s”。吞吐率特指 Web 服务器单位时间内处理的请求数。另一种描述,吞吐率是,单位时间内网络上传输的数据量,也可以指单位时间内处理客户请求数量。它是衡量网络性能的重要指标。通常情况下,吞吐率 “字节数/秒” 来衡量。当然你也可以用 “请求数/秒” 和 “页面数/秒” 来衡量。其实不管一个请求还是一个页面,它的本质都是在网络上传输的数据,那么用来表述数据的单位就是字节数。二、吞吐量吞吐量,是指在一次性能测试过程中网络上传输的数据量的*和。对于交互式应用来说,吞吐量指标反映的是服务器承受的压力,在容量规划的测试中,吞吐量是一个重点关注的指标,因为它能够说明系统级别的负载能力,另外,在性能调优过程中,吞吐量指标也有重要的价值。如一个大型工厂,他们的生产效率与生产速度很快,一天生产 10W 吨的货物,结果工厂的运输能力不行,就两辆小型三轮车一天拉 2 吨的货物,比喻有些夸张,但我想说明的是这个运输能力是整个系统的瓶颈。提示,用吞吐量来衡量一个系统的输出能力是极其不准确的,用个最简单的例子说明,一个水龙头开一天一夜,流出 10 吨水;10 个水龙头开 1 秒钟,流出 0.1 吨水。当然是一个水龙头的吞吐量大。你能说 1 个水龙头的出水能力是 10 个水龙头的强?所以,我们要加单位时间,看谁 1 秒钟的出水量大。这就是吞吐率。三、事务,TPS(Transaction Per second)就是用户某一步或几步操作的集合。不过,我们要保证它有一个完整意义。比如用户对某一个页面的一次请求,用户对某系统的一次登录,淘宝用户对商品的一次确认支付过程。这些我们都可以看作一个事务。那么如何衡量服务器对事务的处理能力。又引出一个概念----TPS每秒钟系统能够处理事务或交易的数量,它是衡量系统处理能力的重要指标。点击率可以看做是 TPS 的一种特定情况。点击率更能体现用户端对服务器的压力。TPS 更能体现服务器对客户请求的处理能力。每秒钟用户向 web 服务器提交的 HTTP 请求数。这个指标是 web 应用特有的一个指标;web 应用是 “请求 - 响应” 模式,用户发一个申请,服务器就要处理一次,所以点击是 web 应用能够处理的交易的最小单位。如果把每次点击定义为一个交易,点击率和 TPS 就是一个概念。容易看出,点击率越大。对服务器的压力也越大,点击率只是一个性能参考指标,重要的是分析点击时产生的影响。需要注意的是,这里的点击不是指鼠标的一次 “单击” 操作,因为一次 “单击” 操作中,客户端可能向服务器发现多个 HTTP 请求。四、吞吐量、吞吐率的意义吞吐量的限制是性能瓶颈的一种重要表现形式,因此,有针对地对吞吐量设计测试,可以协助尽快定位到性能冰晶所在的位置80% 系统的性能瓶颈都是由吞吐量制约并发用户和吞吐量瓶颈之间存在一定的关联通过不断增加并发用户数和吞吐量观察系统的性能瓶颈。然后,从网络、数据库、应用服务器和代码本身 4 个环节确定系统的性能瓶颈。五、吞吐率和压力测试单从定义来看,吞吐率描述了服务器在实际运行期间单位时间内处理的请求数,然而,我们更加关心的是服务器并发处理能力的上限,也就是单位时间内服务器能够处理的最大请求数,即最大吞吐率。所以我们普遍使用 “压力测试” 的方法,通过模拟足够多数目的并发用户,分别持续发送一定的 HTTP 请求,并统计测试持续的*时间,计算出基于这种 “压力” 下的吞吐率,即为一个平均计算值注意在 Web 服务器的实际工作中,其处理的 HTTP 请求通常包括对很多不同资源的请求,也就是请求不同的 URL, 比如这些请求有的是获取图片,有的是获取动态内容,显然服务器处理这些请求所花费的时间各不相同,而这些请求的不同时间组成比例又是不确定的。这就是实际情况下的吞吐率。所以,我们 对于同一个特定有代表性的请求进行压力测试,然后对多个请求的吞吐率按照比例计算加权平均值。Web 服务器并发能力强弱的关键便是在于如何计算针对不同的请求性质来设计最优并发策略。在一定程度上使得 Web 服务器的性能无法充分发挥,这很容易理解,就像银行对不同业务设立不同的窗口一样,这些窗口的服务员分别熟悉自己的窗口业务。可以未不同的客户分别快速办理业务,但是如果让这些窗口都可以办理所有业务,也就是客户可以去任何窗口办理任何业务,那会是怎么样呢?没有几个银行业务员会对所有业务都轻车熟路,这样势必会影响到整体的业务办理速度。六、压力测试的前提吞吐率性能测试的前提并发用户数*请求数请求资源描述压力测试的描述一般包括两个部分,即并发用户数和*请求数,也就是模拟多少用户同时向服务器发送多少请求。请求性质则是对请求的 URL 所代表的资源的描述,比如 1KB 大小的静态文件,或者包含 10 次数据库查询的动态内容等。1、 并发用户数并发用户数就是指在某一时刻同时向服务器发送请求的用户*数。假如 100 个用户同时向服务器分别进行 10 次请求,与 1 个用户向服务器连续进行 1000 次请求。两个的效果一样么?一个用户向服务器连续进行 1000 次请求的过程中,任何时刻服务器的网卡接受缓存区中只有来自该用户的 1 个请求,而 100 个用户同时向服务器分别进行 10 次请求的过程中,服务器网卡接收缓冲区中最多有 100 个等待处理的请求,显然这时候服务器的压力更大。经常有人说某个 Web 服务器能支持多少并发数,除此之外没有任何上下文,这让很多人摸不着头脑,人们常常把并发用户数和吞吐率混淆,他们并不是一回事。一个服务器最多支持多少并发用户数呢?我们可以说,这个柜台支持的最大并发数为 10,因为恰好在这个并发数下,柜台业务开展的非常成功。顾客们都对服务时间非常满意,而此时代表业务办理次数的柜台吞吐率也比较高,商场和顾客们实现双赢。可见,通常所讲的最大并发数是有一定利益前提的,那就是服务器和用户双方所期待的最大收益,服务器希望支持高并发数及高吞吐率,而用户不管那么多,只希望等待较少的时间,或者得到更快的下载速度。所以得出最大并发数的意义,在于了解服务器的承载能力,并且结合用户规模考虑适当的扩展方案。对于同一域名下 URL 的并发下载数是有最大限制的,具体限制视浏览器的不同而不同。 一个真实的用户可能会给服务器带来两个或更多的并发用户的压力,一些高明的用户还可以通过一些方法来修改浏览器的并发数限制。2、请求等待时间用户平均请求等待时间服务器平均请求处理时间用户平均请求等待时间主要用户衡量服务器在一定并发用户数的情况下,对于单个用户的服务质量 服务器平均请求处理时间与前者相比,则用户衡量服务器的整体服务质量,它其实就是吞吐率的倒数。七、压力测试Apache 附带的 ab,ab 可以直接在 web 服务器本地发起测试请求。1、吞吐率随并发用户数变化的曲线图2、服务器平均请求处理时间随并发用户数变化的曲线图 当并发用户数超过 150 之后,请求的平均等待时间大幅度增加,当并发用户达到 200 后,等待时间开始急剧增加。3、用户平均请求等待时间随并发用户数变化的曲线图八、*结针对,吞吐量,吞吐率,TPS 的测试,都需要指明单位时间。以上测试忽略服务器硬件配置,所以性能测试结果也不侧重于它的绝对值意义,我们的目的是探讨如何测量性能以及如何根据不同的场景来优化性能。以上测试使用硬件为CPU: Intel(R) Xeon(R) CPU 1.60GHz 内存:4GB 硬盘转速: 15kr/min以上几个指标的测试,主要是为了提升服务器的处理效率,为构建高可用的 Web 站点做准备。影响 吞吐量,吞吐率,TPS 指标的因素,除了服务器的硬件配置,就剩下并发策略了。简单地说,并发策略的设计就是在服务器同时处理较多请求的时候,如何合理协调并充分利用 CPU 计算和 I/O 请求,使其在较大并发用户数的情况下提供较高的吞吐率并不存在一个对所有性质的请求都高效的并发策略
  • [技术交流] 单元测试
     1         单元测试的重要性1.1      一些错误的认识在实际的单元测试过程中总会有一些错误的认识左右着我们,使之成为单元测试最大的障碍,在此将其一一分析如下:它太浪费时间了,现在要赶进度,时间上根本不允许,或者随便做做应付领导。我是一个很棒的程序员,我写的代码肯定是没有问题的。做单元测试太烦了,直接集成,到时有问题在集成测试时肯定能发现的,实在不行在系统测试总该能发现吧。它仅仅是证明这些代码做了什么。对于以上错误认识的产生归根结底还是由于对单元测试的理解还是不够,没有真正认识到单元测试的重要性。1.2      测试的重要性单元测试是软件测试的基础,因此单元测试的效果会直接影响到软件的后期测试,最终在很大程度上影响到产品的质量。从如下几个方面就可以看出单元测试的重要性在何处。时间方面:如果认真的做好了单元测试,在系统集成联调时非常顺利,因此会节约很多时间,反之那些由于因为时间原因不做单元测试或随便做做的则在集成时总会遇到那些本应该在单元测试就能发现的问题,而这种问题在集成时遇到往往很难让开发人员预料到,最后在苦苦寻觅中才发现这是个很低级的错误而在悔恨自己时已经浪费了很多时间,这种时间上的浪费一点都不值得,正所谓得不偿失。 测试效果:根据以往的测试经验来看,单元测试的效果是非常明显的,首先它是测试阶段的基础,做好了单元测试,在做后期的集成测试和系统测试时就很顺利。其次在单元测试过程中能发现一些很深层次的问题,同时还会发现一些很容易发现而在集成测试和系统测试很难发现的问题。再次单元测试关注的范围也特殊,它不仅仅是证明这些代码做了什么,最重要的是代码是如何做的,是否做了它该做的事情而没有做不该做的事情。测试成本:在单元测试时某些问题就很容易发现,如果在后期的测试中发现问题所花的成本将成倍数上升。比如在单元测试时发现1个问题需要1个小时,则在集成测试时发现该问题需要2个小时,在系统测试时发现则需要3个小时,同理还有定位问题和解决问题的费用也是成倍数上升的,这就是我们要尽可能早的排除尽可能多的bug来减少后期成本的因素之一。 产品质量:单元测试的好与坏直接影响到产品的质量,可能就是由于代码中的某一个小错误就导致了整个产品的质量降低一个指标,或者导致更严重的后果,如果我们做好了单元测试这种情况是可以完全避免的。    综上所述,单元测试是构筑产品质量的基石,我们不要因为节约单元测试的时间不做单元测试或随便做而让我们在后期浪费太多的不值得的时间,我们也不愿意因为由于节约那些时间导致开发出来的整个产品失败或重来!1.3      具有的优点1. 它是一种验证行为。程序中的每一项功能都是测试来验证它的正确性,为以后的开发提供支缓。就算是开发后期,我们也可以轻松的增加功能或更改程序结构,而不用担心这个过程中会破坏重要的东西。而且它为代码的重构提供了保障,这样,我们就可以更自由的对程序进行改进。2.它是一种设计行为。编写单元测试将使我们从调用者观察、思考,特别是先写测试(test-first),迫使我们把程序设计成易于调用和可测试的,即迫使我们解除软件中的耦合。另外还可以使编码人员在编码时产生预测试,将程序的缺陷降低到最小。3.它是一种编写文档的行为。单元测试是一种无价的文档,它是展示函数或类如何使用的最佳文档。这份文档是可编译、可运行的,并且它保持最新,永远与代码同步。4.它具有回归性。自动化的单元测试避免了代码出现回归,编写完成之后,可以随时随地的快速运行测试。 2         单元测试的基本理论2.1      基本概念1. 单元测试:单元测试又称模块测试,属于白盒测试,是最小单位的测试。模块分为程序模块和功能模块。功能模块指实现了一个完整功能的模块(单元),一个完整的程序单元具备输入、加工和输出三个环节。而且每个程序单元都应该有正规的规格说明,使之对其输入、加工和输出的关系做出名明确的描述。2.测试驱动:驱动被测试模块正常运行起来的实体3.测试桩:代替被测模块调用的子模块的实体,该实体一般为桩函数。4. 测试覆盖:评测测试过程中已经执行的代码的多少。5.覆盖率:代码的覆盖程度,一种度量方式。针对代码的测试覆盖率有许多种度量方式,定义如下: 语句覆盖(StatementCoverage):也称为行覆盖(linEC),段覆盖(segmentcoverage)和基本块覆盖(bAS)。它度量每一个可执行语句是否被执行到了。icblockcoverageoverage判定覆盖(DecisionCoverage):也被称为分支覆盖(branchcoverage),所有边界覆盖(all-edgescoverage),基本路径覆盖(basispathcoverage),判定路径覆盖(decision-decision-path或DDPtesting)。它度量是否每个BOO型的表达式取值true和false在控制结构中都被测试到了。L 条件覆盖(ConDI):它独立的度量每一个子表达式,报告每一个子表达式的结果的true或false。这个度量和判定覆盖(decisioncoverage)相似,但是对控制流更敏感。不过,完全的条件覆盖并不能保证完全的判定覆盖。tionCoverage 路径覆盖(PathCoverage):也称为断言覆盖(prEDI),它度量了是否函数的每一个可能的分支都被执行了。路径覆盖的一个好处是:需要彻底的测试。但有两个缺点:一是,路径是以分支的指数级别增加的,例如:一个函数包含10个IF语句,就有1024个路径要测试。如果加入一个IF语句,路径数就达到2048;二是,许多路径不可能与执行的数据无关。catecoverage循环覆盖(LOOP):这个度量报告你是否执行了每个循环体零次、只有一次还是多余一次(连续地)。对于do-while循环,循环覆盖报告你是否执行了每个循环体只有一次还是多余一次(连续地)。这个度量的有价值的方面是确定是否对于while循环和for循环执行了多于一次,这个信息在其它的覆盖率报告中是没有的。 2.2      测试的内容单元测试的对象是软件设计的最小单位——模块或函数,单元测试的依据是详细设描述。测试者要根据详细设计说明书和源程序清单,了解模块的I/O条件和模块的逻辑结构。主要采用白盒测试的测试用例,辅之以黑盒测试的测试用例,使之对任何合理和不合理的输入都能鉴别和响应。要求对所有的局部和全局的数据结构、外部接口和程序代码的关键部分进行桌面检查和代码审查。在单元测试中,需要对下面5个方面的内容进行测试,也是构造测试用例的基础。1)   模块接口:测试模块的数据流。如果数据不能正确地输入和输出,就谈不上进行其他测试。因此,对于模块接口需要如下的测试项目:调用所测模块时的输入参数与模块的形式参数在个数、属性、顺序上是否匹配;所测模块调用子模块时,它输入个子模块的参数与子模块的形式参数在个数、属性、顺序上是否匹配;是否修改了只做输入用的形式参数;输出给标准函数的参数在个数、属性、顺序上是否匹配;全局变量的定义在各模块中是否一致; 限制是否通过形式参数来传送。2)  局部数据结构测试:模块的局部数据结构是最常见的错误来源,应设计测试用例以检查以下各种错误: 检查不正确或不一致的数据类型说明;使用尚未赋值或尚未初始化的变量; 错误的初始值或错误的默认值;变量名拼写错误或书写错误; 不一致的数据类型。3)路径测试:对基本执行路径和循环进行测试会发现大量的错误。根据白盒测试和黑盒测试用例设计方法设计测试用例。设计测试用例查找由于错误的计算、不正确的比较或不正常的控制流而导致的错误。常见的不正确的计算有:Ø         运算的优先次序不正确或误解了运算的优先次序;Ø         运算的方式错误(运算的对象彼此在类型上不相容);Ø         算法错误;Ø         初始化不正确;Ø         运算精度不够;Ø         表达式的符号表示不正确等。 常见的比较和控制流错误有:Ø         不同数据类型的比较;Ø         不正确的逻辑运算符或优先次序;Ø         因浮点运算精度问题而造成的两值比较不等;Ø         关系表达式中不正确的变量和比较符;Ø         “差1错”,即不正确地多循环或少循环一次;Ø         错误的或不可能的循环终止条件;Ø         当遇到发散的迭代时不能终止循环;Ø         不适当地修改了循环变量等。4) 错误处理测试:比较完善的模块设计要求能预见出错的条件,并设置适当的出错处理对策,以便在程序出错时,能对出错程序重新做安排,保证其逻辑上的正确性。这种出错处理也是模块功能的一部分。表明出错处理模块有错误或缺陷的情况有:出错的描述难以理解;出错的描述不足以对错误定位和确定出错的原因;显示的错误与实际的错误不符;对错误条件的处理不正确;在对错误进行处理之前,错误条件已经引起系统的干预; 如果出错情况不予考虑,那么检查恢复正常后模块可否正常工作。5) 边界测试:边界上出现错误上常见的。设计测试用例检查: 在n次循环的第0次、1次、n次是否有错误;运算或判断中取最大最小值时是否有错误;数据流、控制流中刚好等于、大于、小于确定的比较值时是否出现错误。 2.3      测试的环境构成何时进行单元测试?单元测试在编码阶段进行。在源程序代码编制完成、经过评审和验证、确认没有语法错误之后,就可以开始进行单元测试的测试用例设计。要利用软件设计文档,设计可以验证程序功能、找出程序错误的多个测试用例。对于每一组输入,应该有预期的正确结果。在单元测试时,如果模块不是独立的程序,需要辅助测试模块,有两种辅助模块:驱动模块(Driver):所测模块的主程序。它接收测试数据,把这些数据传递给所测试模块,最后再输出测试结果。当被测试模块能完成一定功能时,也可以不要驱动模块。 桩模块(Stub):用来代替所测模块调用的子模块。      被测试模块、驱动模块和桩模块共同构成了一个测试环境,如下图所示:3         测试方法与过程3.1      用例设计1.测试用例的组成(在单元测试中测试用例基本上由测试脚本组成)用例运行前置条件被测模块/单元所需环境(全局变量赋值或初始化实体)启动测试驱动设置桩调用被测模块设置预期输出条件判断2.测试用例的设计原则一个好的测试用例在于能够发现至今没有发现的错误;测试用例应由测试输入数据和与之对应的预期输出结果这两部分组成;在测试用例设计时,应当包含合理的输入条件和不合理的输入条件;为系统运行起来而设计测试用例;为正向测试而设计测试用例;为逆向测试而设计测试用例;为满足特殊需求而设计测试用例;为代码覆盖而设计测试用例;3.用例设计方法1)        规范(规格)导出发2)        等价类划分法3)        边界值分析法4)        状态转移测试法5)        分支测试法6)        条件测试法7)        数据定义-使用测试法(又名数据流测试法)8)        内部边界值测试法9)        错误猜测法4. 特定的用例测试设计1)声明测试:检查模块中的所有变量是否被声明。经验表明,大量重要的错误都是由于变量没有被声明或没有被正确的声明而引起的。2)路径测试:要求模块中所有可能的路径都被执行一遍,属逻辑覆盖测试。基本路径测试:由于实际中,一个模块中的路径可能非常多,由于时间和资源有限,不可能一一测试到。这就需要把测试所有可能路径的目标减少到测试足够多的路径,以获得对模块的信心。要测试的最小路径集就是基本测试路径集。基本测试路径集要保证:每个确定语句的每一个方向要测试到;每条语句最少执行一次。3)循环测试:重点检查循环的条件-判断部分以及边界条件。测试循环是一种特殊的路径测试,因为循环比其他语句都复杂一些。循环中错误的发生机会比其他代码构成部分多。因此,对于任何给定的循环测试应该包括测试下面每一条件的测试用例: 循环不执行; 执行一次循环;执行两次循环;反映执行典型的循环的执行次数;如果有最大循环次数,最大循环次数减1;最大循环次数;大于最大循环次数。对于增量和减量不是1的FOR语句,要特别注意,因为程序员习惯于增量1。4) 循环嵌套:循环嵌套使逻辑的次数呈几何级数增长,设计测试嵌套循环的测试用例应该包括的测试条件有:把外循环设置为最小值,并运行内循环所有可能的情况;把内循环设置为最小值,并运行外循环所有可能的情况;把所有的循环变量都设置为最小值运行;把所有的循环变量都设置为最大值运行; 把外循环设置为最大值,并运行内循环所有可能的情况;把内循环设置为最大值,并运行外循环所有可能的情况;5) 边界值测试:指程序内部边界测试。检查确定代码在任何边界情况下都不会出差错。重点检查小于、等于和大于边界条件的情况。边界值测试是指专门设计用来测试当条件语句中引用的值处在边界或边界附近时系统反映的测试。被测试语句的最好的例子就是“IF-THEN…ELSE-ENDIF”部分。这样语句的例子如:IF a <= 123 THENb = 1ELSE IF a >= 123 THENb = 2ELSE b = 3END IF           上面例子中的边界值测试用例应该至少包括a的以下值:122,123,124。当a=123时,b=1还是2。(找出逻辑判断的矛盾)6)接口测试:检查模块的数据流(输入、输出)是否正确。检查输入的参数和声明的自变量的个数,数据类型和输入顺序是否一致。检查全局变量是否被正确的定义和使用等。7)确认测试:是否接受有效输入数据(操作),拒绝无效数据(操作)。8)事务测试:输入->输出,错误处理。3.2      用例执行一般来说,做单元测试均采用的是商用的测试工具或自行开发的测试工具,用例的编写都是在测试工具上完成,测试用例都是一些测试脚本,都以文件的方式来保存,故其用例的执行过程主要是由测试工具根据所编写的具体的测试用例脚本来完成,这样对于用例的管理和执行也非常灵活。在特定场合,比如某种压力测试或极限测试,对于测试执行过程时间很长时(几个小时以上),一般都预先编写好用例(确保用例无误),使用空闲机或非工作时间执行测试用例,这样操作起来较节约时间。在用例的执行过程中务必注意如下事项: 程序的执行过程―――便于构造发散用例不要放过任何细节―――这种细节可能就是问题 3.3      测试优化和策略在测试的过程中为了提高测试效率和效果,不断的减少冗余劳动,也为后期的回归测试和测试管理带来很大的方便,不至于感到测试很混乱无序。因此我们要对测试用例和测试执行进行不断的优化,以测试策略为指导方针进行测试。1、测试用例的优化    测试用例的优化主要是指用例的合并、修改和删除,减少冗余的无价值的测试,其优化依据来源于测试后的测试数据分析和评估,其中测试覆盖也是用例优化的主要参考。2、测试执行的优化        测试执行的优化主要是指测试步骤的优化,减少测试人员的手工操作,因为太多的手工操作会导致测试人员很厌倦,直接影响测试效果,优化依据来源于测试总结。3、测试策略    在测试过程中由于时间或资源的原因可能会使测试处于紧张的局面,在此情况下我们要采取一定的策略来解决此局面。策略来源于测试数据的分析,主要的方法是:为各模块制定测试优先级,其优先级的划分依据如下:哪些是重点模块? 哪些程序是最复杂、最容易出错的? 哪些程序是相对独立,应当提前测试的? 哪些程序最容易扩散错误?哪些程序是开发者最没有信心的? 80-20原则:80%的缺陷聚集在20%的模块中,经常出错的模块改错后还会经常出错,这种应该列入测试重点。 3.4      测试评估   单元测试完成以后,需要对单元测试的执行效果进行评估,主要从以下几方面进行:1)测试完备性评估,主要检查测试过程中是否已经执行了所有的测试用例,对新增的测试用例是否已及时更新测试方案等。2)代码覆盖率评估,主要是根据代码覆盖率工具提供的语句覆盖情况报告,检查是否达到方案中的要求,公司要求语句覆盖达到100%。但很多情况下,第一轮测试用例执行完后是很难达到的,这时在评估过程中要对覆盖率进行分析,主要从以下方面来考虑:不可能的路径或条件不可达的或冗余的代码不充分的测试用例3) 从覆盖的角度看,测试应该覆盖: 功能覆盖 输入域覆盖输出域覆盖函数交互覆盖代码执行覆盖   大多数有效的测试用例都来自于分析,而不是仅仅为了达到测试覆盖率目标而草率设计测试用例。千万不要误解测试覆盖,测试覆盖并不是我们最求的目的,它只是评价测试的一种方式,为测试提供指导和依据。3.5      测试过程1.测试过程中各种人员的作用系统分析设计人员     进行需求跟踪,确保系统需求的实现和更新。进行软件单元可测性分析,确定单元测试的对象、范围和方法。软件开发人员     负责编码和单元测试过程,完成单元测试计划、方案和报告。软件测试人员     参与单元测试计划、方案和报告的评审,对单元测试的计划、设计和执行质量进行监控。根据实际情况,可选择参与由开发人员负责的代码检视、单元测试等活动。 配置管理人员    对代码及单元测试文档进行配置管理。质量保证(QA)人员     参与编码与单元测试评审,对编码和单元测试过程进行审计。2.  单元测试输入《软件需求规格说明书》《软件详细设计说明书》《软件编码与单元测试工作任务书》《软件集成测试计划》《软件集成测试方案》用户文档3.单元测试的输出《单元测试计划》《单元测试方案》《需求跟踪说明书》或需求跟踪记录 代码静态检查记录《正规检视报告》 问题记录 问题跟踪和解决记录软件代码开发版本《单元测试报告》《软件编码与单元测试任务总结报告》3.6      测试实施1.  单元测试实施步骤1)        制定测试计划和测试方案(包括测试工具的选择)2)        根据计划和方案及相关输入文档编写测试用例3)        搭建测试环境4)        执行测试5)        记录和跟踪问题6)        编写测试报告和总结报告2.  单元测试实施遵循的原则 精心制定测试计划 严格评审测试计划 严格执行测试计划系统分析测试结果并提交报告4         常用测试工具介绍常用的C语言单元测试工具介绍如下: winAMS、CasePlayer21)        简介GAIO公司的覆盖率专家winAMS获得机能安全标百准ISO26262/IEC61508工具认证,是日本工业制造度领域普遍使用的针对C/C++的单元/集成测试工具。winAMS将通过交叉编译生成的原始代码作为评价代码,具有使用芯片仿真器进行仿真功能的测试工具。不仅可以对C/C++语言编写的程序进行逻辑水平的测试,还可以对嵌入式软件特有的依存于芯片的问题点进行确认。2)        功能特性尽可能使单元测试的环境与目标环境相同采用全面支持嵌入式微机的微机化功能测试平台环境不需要插入测试用代码直接使用目标机代码进行测试取得第三方认证机构TUVSUD对适用于汽车机能安全ISO26262软件工具的认证测试工程管理
  • 海顿平台伙伴操作指导(联运商品、严选认证、沃土云创)-2022.05.16
    操作指导刷新日期:2022.05.16       联运商品认证测试主要包含功能、性能、安全、可靠性测试;严选商品认证测试主要包含功能、性能、安全测试;沃土云创认证测试主要包含功能测试和集成测试;以上认证测试都是以伙伴作为测试主体,华为方进行测试支撑及测试结果审核。      三类认证测试都基于海顿平台操作完成,海顿平台是一个支撑伙伴进行解决方案构建和验证的自助化工具平台,平台访问链接如下:cid:link_0。附件为联运商品、沃土云创基于海顿平台认证测试操作指导以及相关的参考附件下载地址:cid:link_1。