测试方法及装置、电子设备、计算机可读介质与流程

1.本技术涉及通信技术领域，具体涉及一种测试方法及装置、电子设备、计算机可读介质。


背景技术：

2.在电信业务及相关it系统开发过程中，涉及到不同系统间的交互，缺少网元设备返回的报文将可能影响该类系统整体的研发进度与产品质量。因此，需要对网元设备执行业务的流程和返回报文结果进行测试。
3.相关技术中，通常需要在实验室搭建多种类型、数量繁多的网元设备来实现网元设备的搭建，需要付出高昂的成本。而直接在网元设备上进行业务逻辑或指令验证的行为，可能会对网元设备上已执行的业务产生影响，可能存在安全性风险。


技术实现要素：

4.为解决上述技术问题，本技术的实施例提供了一种测试方法及装置、电子设备、计算机可读介质。
5.根据本技术实施例的一个方面，提供了一种测试方法，所述方法包括：接收测试指令；其中，所述测试指令用于指示返回指定结果报文；运行测试程序，以通过所述测试程序从预设结果报文库含有的多个结果报文中获取目标结果报文，并返回所述目标结果报文；获取所述测试程序返回的目标结果报文；根据所述目标结果报文与所述指定结果报文，生成测试结果。
6.在本技术的一个实施例中，所述测试指令包括用于执行业务相关联的业务参数以及用于根据所述业务参数执行所述业务的网元设备参数；所述运行测试程序，以通过所述测试程序从预设结果报文库含有的多个结果报文中获取目标结果报文，包括：运行测试程序，以通过所述测试程序从预设结果报文库含有的多个结果报文中，确定出与所述网元设备参数相匹配的候选结果报文，并从所述候选结果报文中，确定出与所述业务参数相匹配的目标结果报文。
7.在本技术的一个实施例中，所述候选结果报文包括业务执行成功的结果报文、业务执行失败的结果报文，以及业务错误的结果报文；所述从所述候选结果报文中，确定出与所述业务参数相匹配的目标结果报文，包括：对所述业务参数进行参数校验，得到参数校验结果；根据所述参数校验结果，从所述业务执行成功的结果报文、业务执行失败的结果报文，以及业务错误的结果报文中，确定出与所述业务参数相匹配的目标结果报文。
8.在本技术的一个实施例中，所述根据所述参数校验结果，从所述业务执行成功的结果报文、业务执行失败的结果报文，以及业务错误的结果报文中，确定出与所述业务参数相匹配的目标结果报文，包括：若所述参数校验结果表征参数校验成功，则从所述业务参数中获取状态信息，并根据所述状态信息从所述业务执行成功的结果报文和所述业务执行失败的结果报文中，确定出与所述状态信息相匹配的目标结果报文；若所述参数校验结果表
征参数校验失败，则从所述业务参数中获取错误信息，并将所述错误信息和所述业务错误的结果报文进行整合处理，得到与所述错误信息相匹配的目标结果报文。
9.在本技术的一个实施例中，所述根据所述目标结果报文与所述指定结果报文，生成测试结果，包括：若所述目标结果报文与所述指定结果报文相匹配，则生成用于表征测试成功的测试结果；若所述目标结果报文与所述指定结果报文不匹配，则生成用于表征测试失败的测试结果。
10.在本技术的一个实施例中，在所述接收测试指令之前，所述方法还包括：获取网元设备执行业务所产生的历史结果数据；其中，所述历史结果数据包括业务执行成功的结果报文、业务执行失败的结果报文，以及业务错误的结果报文；以及获取所述网元设备的网元设备参数、以及所述网元设备执行所述业务相关联的业务参数；将所述网元设备参数、所述业务参数，以及所述历史结果数据关联存储至所述预设结果报文库中。
11.在本技术的一个实施例中，在所述接收测试指令之前，所述方法还包括：接收针对所述测试程序的编写指令，并根据所述编写指令生成所述测试程序；将所述测试程序部署在终端设备中，以在所述终端设备中运行所述测试程序，得到所述测试程序所返回的目标结果报文。
12.根据本技术实施例的一个方面，提供了一种测试装置，所述装置包括：接收模块，配置为接收测试指令；其中，所述测试指令用于指示返回指定结果报文；运行模块，配置为运行测试程序，以通过所述测试程序从预设结果报文库含有的多个结果报文中获取目标结果报文，并返回所述目标结果报文；获取模块，配置为获取所述测试程序返回的目标结果报文；生成模块，配置为根据所述目标结果报文与所述指定结果报文，生成测试结果。
13.根据本技术实施例的一个方面，提供了一种电子设备，包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述电子设备实现如前所述的测试方法。
14.根据本技术实施例的一个方面，提供了一种计算机可读介质，其上存储有计算机可读指令，当所述计算机可读指令被计算机的处理器执行时，使计算机执行如上所述的测试方法。
15.在本技术的实施例所提供的技术方案中，通过接收测试指令，可以从测试指令中获取搭配指定结果报文，并在接收到测试指令后运行测试程序，通过测试程序从预设结果报文库含有的多个结果报文中获取目标结果报文，根据目标结果报文与指定结果报文生成测试结果。一方面，本技术实施例的测试方法可以在网元设备指令的验证过程中，对核心网中的网元设备针对业务输出的返回结果进行模拟，从而实现对网元设备的业务过程的测试，得到与网元设备实际执行业务时返回报文格式相同的目标结果报文。又一方面，本技术实施例的测试方法直接在测试平台上运行测试程序，进而从预设结果报文库中确定出目标结果报文并生成测试结果，只需要构建出预设结果报文库，以及在测试平台上模拟出网元设备的运行环境，即可完成测试，不需要在实验室搭建多种类型、数量繁多的网元设备，能够有效降低相关技术中需要部署实验室环境的测试成本，且直接通过测试程序模拟网元设备执行业务的输出结果，对模拟流程与实际网元设备进行解耦，在维护业务逻辑验证流程的完整性的同时，兼具有操作简单、安全性高的特点。
16.应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不
能限制本技术。
附图说明
17.此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本技术的实施例，并与说明书一起用于解释本技术的原理。显而易见地，下面描述中的附图仅仅是本技术的一些实施例，对于本领域普通技术者来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：
18.图1是本技术的一示例性实施例示出的测试系统的组网架构示意图；
19.图2是本技术的一示例性实施例示出的一种测试方法的流程图；
20.图3是图2所示实施例中的步骤s220在一示例性实施例中的流程图；
21.图4是图3所示实施例中的步骤s320在一示例性实施例中的流程图；
22.图5是本技术的另一示例性实施例示出的一种测试方法的流程图；
23.图6是本技术的另一示例性实施例示出的一种测试方法的流程图；
24.图7是本技术的一示例性实施例示出的测试装置的框图；
25.图8是适于用来实现本技术实施例的电子设备的计算机系统的结构示意图。
具体实施方式
26.这里将详细地对示例性实施例执行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本技术相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本技术的一些方面相一致的装置和方法的例子。
27.附图中所示的方框图仅仅是功能实体，不一定必须与物理上独立的实体相对应。即，可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
28.附图中所示的流程图仅是示例性说明，不是必须包括所有的内容和操作/步骤，也不是必须按所描述的顺序执行。例如，有的操作/步骤还可以分解，而有的操作/步骤可以合并或部分合并，因此实际执行的顺序有可能根据实际情况改变。
29.在本技术中提及的“多个”是指两个或者两个以上。“和/或”描述关联对象的关联关系，表示可以存在三种关系，例如，a和/或b可以表示：单独存在a，同时存在a和b，单独存在b这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
30.本技术实施例提供的方案涉及通信技术，具体涉及5g通信技术中的模拟测试技术。可以理解的是，随着通信业务的发展，不同系统之间存在交互过程，在各个系统之间的交互过程中，若是缺少网元设备返回的报文可能影响系统整体的研发进度与产品质量。因此，在相关it系统的开发过程中，需要对网元设备的业务流程的设计、指令的设计、指令执行过程以及业务逻辑进行测试，以便通过测试结果发现相关it系统中指令执行时存在的缺陷。
31.在生产环境中，若是直接在网元设备上进行业务逻辑和指令的执行过程进行测试，则可能会影响到网元设备上的现有配置，甚至影响现在正在网元设备上执行的业务，影响用户体验；此外，直接在网元设备上进行业务逻辑或指令验证的行为，需要付出额外的人
力来对网元设备进行监控，而在实验室搭建多种类型、数量繁多的网元设备，则需付出高昂的成本。
32.因此，为了避免或降低直接在网元设备上进行测试而可能导致的影响，本技术实施例提出一种测试系统，请参阅图1，图1是本技术的一示例性实施例示出的测试系统框架示意图，如图1所示，该测试系统至少包括终端设备101以及测试平台102，从图1可以看出，测试平台102具有逻辑计算功能，其中：
33.测试平台102接收测试指令；其中，测试指令用于指示返回指定结果报文；
34.运行测试程序，以通过测试程序从预设结果报文库含有的多个结果报文中获取目标结果报文，并返回目标结果报文；
35.获取测试程序返回的目标结果报文；
36.根据目标结果报文与指定结果报文，生成测试结果。
37.需要说明的是，本技术实施例中的测试指令可以是终端设备101向测试平台102发送的，测试平台102接收到来自于终端设备101的测试指令后，运行测试程序开始测试过程。
38.需要说明的是，网元设备执行业务指令后会返回业务指令对应的结果报文；本技术实施例的测试平台102接收到测试指令，测试指令指示测试平台运行测试程序后返回指定结果报文，测试平台根据测试指令运行测试程序，用于模拟网元设备执行业务指令并得到结果数据的过程，测试平台根据测试指令运行测试程序，通过测试程序从预设结果报文库含有的多个结果报文中得到目标结果报文，将目标结果报文与指定结果报文进行比较得到测试结果，有助于确定出网元设备执行业务指令的执行流程是否存在逻辑性错误。
39.本技术实施例中的网元设备可以是4g(第四代移动通信技术)核心网网元设备，也可以是5g(第五代移动通信技术)核心网网元设备。
40.其中，4g核心网网元设备可以包括以下一种或多种：移动性管理实体mme(mobility management entity)、业务网关sgw(serving gate way)、pdn网关pgw(pdn gate way)、策略和计费规则功能单元pcrf(policy and charging rules function)、归属签约用户服务器hss(home subscriber server)、基站enb(evolved node b)。pdn(public data network)为公用数据网，为公众提供数据通信服务的通信网。
41.其中，5g核心网网元设备包括以下一种或多种：网络存储功能nrf(nf repository function)、用户面功能upf(user plane function)、无线接入网ran(radio access network)、网络开放功能nef、策略控制功能pcf(policy control function)、统一数据管理udm(unified data manager)、接入和移动性管理功能amf(access and mobility management function)、会话管理功能smf(session management function)。
42.基于上述测试系统，本技术的实施例提出一种测试方法及测试方法及装置、电子设备、计算机可读介质，下文将进行详细描述。
43.请参阅图2，图2是本技术的一示例性实施例示出的测试方法的流程图。该方法可以应用于包含图1所示的测试系统的实施环境，并由该测试系统中的测试平台102执行。应理解的是，该方法也可以适用于其它的示例性实施环境，并由其它实施环境中的设备具体执行，本实施例不对该方法所适用的实施环境进行限制。
44.在一示例性的实施例中，测试方法至少包括步骤s210至步骤s240，详细介绍如下：
45.步骤s210，接收测试指令；其中，测试指令用于指示返回指定结果报文。
46.本技术实施例中的测试指令可以是终端设备向测试平台发送的，以便测试平台接收到来自于终端设备的测试指令后，运行测试程序开始测试过程。
47.需要说明的是，本技术实施例中的测试指令包括用于执行业务相关联的业务参数以及用于根据业务参数执行业务的网元设备参数。测试指令可以用于测试网元设备执行业务的过程中是否存在逻辑问题，还可以用于测试网元设备在完成业务的执行后所返回的结果数据是否正确等。测试指令的内容可以根据实际情况设计，本技术实施例不对此进行限制。
48.步骤s220，运行测试程序，以通过测试程序从预设结果报文库含有的多个结果报文中获取目标结果报文，并返回目标结果报文。
49.本技术实施例中的测试程序可以是根据网元设备执行业务的执行流程而预先设计好的测试程序，可以用于测试网元设备执行业务的逻辑准确性和数据正确性。测试程序可以包括网元设备执行业务的执行程序，在运行测试程序时，相当于将网元设备执行业务的执行程序完整的运行一遍，运行过程中，从预设结果报文库含有的多个结果报文中获取目标结果报文。也即测试程序执行完成后得到目标结果报文，将得到的目标结果报文与指定结果报文进行比较，得到测试结果。
50.需要说明的是，在本技术实施例中，步骤s220中运行测试程序，以通过测试程序从预设结果报文库含有的多个结果报文中获取目标结果报文的过程，还可以包括如下过程：运行测试程序，以通过测试程序从预设结果报文库含有的多个结果报文中，确定出与网元设备参数相匹配的候选结果报文，并从候选结果报文中确定出与业务参数相匹配的目标结果报文。
51.本技术实施例中的预设结果报文库中存储有多个网元设备执行业务所产生的结果报文，预设结果报文库中的结果报文可以包括网元设备参数、执行业务相关的业务参数、与业务执行相关的状态参数等作为查询依据。
52.示例性的，本技术实施例中的预设结果报文库存储有网元设备执行业务时可能会出现的各种结果数据。例如，一个网元设备执行业务时可能会出现的各种结果数据包括业务执行成功的结果报文、业务执行失败的报文以及业务错误的结果报文。预设结果报文库中的存储数据是根据各个网元设备执行业务所产生的大量历史结果数据而得到的。
53.示例性的，预设结果报文库中一个网元设备执行业务的结果报文存储内容可以参照下表1：
[0054][0055]
表1
[0056]
示例性的，预设结果报文库中一个网元设备执行业务的结果报文存储格式可以采
用以下方式：《网元设备参数1：业务1参数，success-业务1执行成功的结果报文，fail-业务1执行失败的结果报文；业务2参数，success-业务2执行成功的结果报文，fail-业务2执行失败的结果报文；参数错误的结果报文》。
[0057]
需要说明的是，本技术实施例中通过测试程序从预设结果报文库含有的多个结果报文中，确定出与网元设备参数相匹配的候选结果报文的过程可以包括以下过程：根据测试指令中携带的网元设备参数，从预设结果报文库中确定出与网元设备参数对应的结果报文作为候选结果报文。
[0058]
本技术实施例中的候选结果报文包括业务执行成功的结果报文、业务执行失败的结果报文，以及业务错误的结果报文。
[0059]
举例说明，若预设结果报文库中存储的结果报文包括第一网元设备a和第二网元设备b执行业务产生的结果报文数据，包括：《第一网元设备参数a：业务1参数，success-第一网元设备针对业务1执行成功的结果报文，fail-第一网元设备针对业务1执行失败的结果报文；业务2参数，success-第一网元设备针对业务2执行成功的结果报文，fail-第一网元设备针对业务2执行失败的结果报文；参数错误的结果报文x1》，以及《第二网元设备参数b：业务1参数，success-第二网元设备针对业务1执行成功的结果报文，fail-第二网元设备针对业务1执行失败的结果报文；业务2参数，success-第二网元设备针对业务2执行成功的结果报文，fail-第二网元设备针对业务2执行失败的结果报文；参数错误的结果报文x2》。若测试指令中的网元设备参数为a，则根据测试指令中携带的网元设备参数a，从预设结果报文库中确定出与网元设备参数a对应的结果报文包括“success-第一网元设备针对业务1执行成功的结果报文”、“fail-第一网元设备针对业务1执行失败的结果报文”、“success-第一网元设备针对业务2执行成功的结果报文”、“fail-第一网元设备针对业务2执行失败的结果报文”、“参数错误的结果报文x1”，将从预设结果报文库中确定出的与网元设备参数a对应的结果报文作为候选结果报文，也即，候选结果报文包括“success-第一网元设备针对业务1执行成功的结果报文”、“状态参数fail-第一网元设备针对业务1执行失败的结果报文”、“success-第一网元设备针对业务2执行成功的结果报文”、“fail-第一网元设备针对业务2执行失败的结果报文”、“参数错误的结果报文x1”。
[0060]
在本技术的一个实施例中，如图3所示，从候选结果报文中，确定出与业务参数相匹配的目标结果报文的过程，可以包括步骤s310至步骤s320，详细介绍如下：
[0061]
步骤s310，对业务参数进行参数校验，得到参数校验结果。
[0062]
本技术实施例中的业务参数为区分业务种类的标识。同一个网元设备可以执行多种业务，因此，通过业务参数对不同业务进行区分，有助于根据更好的将网元设备执行不同业务的结果数据存储在预设结果报文库中，此外，在对预设结果报文库中的数据进行查询时，也可以将业务参数作为一项检索因子，有助于快速查询数据。
[0063]
在一示例性的实施例中，对业务参数进行参数校验，得到参数校验结果的过程，还可以包括如下过程：将业务参数与预设结果报文库中的预存业务参数进行参数比较；若业务参数与预设结果报文库中的预存业务参数相同，则参数校验结果为参数校验成功；若预设结果报文库中没有找到与业务参数相同的预存业务参数，则参数校验结果为参数校验不成功。
[0064]
步骤s320，根据参数校验结果，从业务执行成功的结果报文、业务执行失败的结果
报文，以及业务错误的结果报文中，确定出与业务参数相匹配的目标结果报文。
[0065]
在本技术的一个实施例中，如图3所示，步骤s320中根据参数校验结果，从业务执行成功的结果报文、业务执行失败的结果报文，以及业务错误的结果报文中，确定出与业务参数相匹配的目标结果报文的过程，可以包括步骤s410至步骤s420，详细介绍如下：
[0066]
步骤s410，若参数校验结果表征参数校验成功，则从业务参数中获取状态信息，并根据状态信息从业务执行成功的结果报文和业务执行失败的结果报文中，确定出与状态信息相匹配的目标结果报文。
[0067]
需要说明的是，本技术实施例中的状态信息指的是网元设备执行业务的结果状态，例如，状态信息可以表示业务执行成功的状态或业务执行失败的状态。
[0068]
在一示例性的实施例中，业务参数中的状态信息包括业务指令执行成功的第一状态参数以及业务指令执行失败的第二状态参数；步骤s410中根据状态信息从业务执行成功的结果报文和业务执行失败的结果报文中，确定出与状态信息相匹配的目标结果报文的过程，可以包括以下过程，详细介绍如下：
[0069]
若状态信息中的状态参数为业务指令执行成功的第一状态参数，则从候选报文中确定出业务执行成功的结果报文作为目标结果报文；
[0070]
若状态信息中的状态参数为业务指令执行失败的第二状态参数，则从候选报文中确定出业务执行失败的结果报文作为目标结果报文。
[0071]
示例性的，状态信息中的状态参数可以包括业务执行成功的第一状态参数“success”、业务执行失败的第二状态参数“fail”。若状态信息中的状态参数为“success”，则从候选报文中确定出业务执行成功的结果报文作为目标结果报文；若状态信息中的状态参数为“fail”，则从候选报文中确定出业务执行失败的结果报文作为目标结果报文。
[0072]
举例说明，基于上述实施例得到的候选结果报文包括“success-第一网元设备针对业务1执行成功的结果报文”、“fail-第一网元设备针对业务1执行失败的结果报文”、“success-第一网元设备针对业务2执行成功的结果报文”、“fail-第一网元设备针对业务2执行失败的结果报文”、“参数错误的结果报文x1”。若测试指令中的业务参数为业务1，则不考虑与业务2相关的结果报文，只需要将业务1相关的结果报文作为候选项，即从“success-第一网元设备针对业务1执行成功的结果报文”、“fail-第一网元设备针对业务1执行失败的结果报文”和“参数错误的结果报文x1”确定出目标结果报文。若且参数校验结果为参数校验成功，则从业务参数中获取状态信息，若状态信息中的状态参数为success，则可以确定出与状态信息相匹配的目标结果报文为“success-第一网元设备针对业务1执行成功的结果报文”，若状态信息中的状态参数为fail，则可以确定出与状态信息相匹配的目标结果报文为“fail-第一网元设备针对业务2执行失败的结果报文”。若测试指令中的业务参数为业务1，且参数校验结果为参数校验失败，则可以确定出目标结果报文为“参数错误的结果报文x1”。
[0073]
步骤s420，若参数校验结果表征参数校验失败，则从业务参数中获取错误信息，并将错误信息和业务错误的结果报文进行整合处理，得到与错误信息相匹配的目标结果报文。
[0074]
需要说明的是，本技术实施例中的错误信息指的是导致业务参数校验失败的参数信息，错误信息可以是导致业务参数校验失败的网元设备参数，也可以为导致业务参数校
验失败的业务参数。
[0075]
需要说明的是，网元设备在接收到业务指令时，会获取业务指令中的网元设备参数，并根据网元设备参数确定出网元设备适配的通信协议，若测试指令中的通信协议与网元设备的通信协议不一致，则在参数校验时会失败，此时，从业务参数中获取的错误信息为网元设备参数。步骤s420中将错误信息和业务错误的结果报文进行整合处理，得到与错误信息相匹配的目标结果报文的过程，包括：将业务错误的结果报文中的错误信息替换为网元设备参数。
[0076]
举例说明，若测试指令预对网元设备c的业务执行流程进行测试，已知网元设备c适配的通信协议为ssh协议，若测试指令中携带的相关参数表征通信协议不是与网元设备c适配的通信协议，则参数校验结果表征参数校验失败，此时从业务参数中获取的错误信息为网元设备c的网元设备参数，并将错误信息和业务错误的结果报文进行整合处理，得到与错误信息相匹配的目标结果报文。
[0077]
步骤s230，获取测试程序返回的目标结果报文。
[0078]
需要说明的是，本技术实施例中的目标结果报文为测试程序运行完成后得到的，用于表示网元设备执行业务指令所返回的报文。
[0079]
步骤s240，根据目标结果报文与指定结果报文，生成测试结果。
[0080]
本技术实施例中的指定结果报文是根据网元设备执行业务指令的历史结果数据而确定出的，可以携带在测试指令中，用于指示返回指定结果报文。指定结果报文还可以通过人工输入的方式获得，或者还可以从预存有测试指令与指定结果报文之间的映射关系的数据库中获取，具体可以根据实际场景确定，本技术实施方式也不对此进行限制。
[0081]
在本技术的一个实施例中，步骤s240中根据目标结果报文与指定结果报文，生成测试结果的过程，可以包括如下过程，详细介绍如下：
[0082]
若目标结果报文与指定结果报文相匹配，则生成用于表征测试成功的测试结果；
[0083]
若目标结果报文与指定结果报文不匹配，则生成用于表征测试失败的测试结果。
[0084]
由上可知，本技术实施例可以从测试指令中获取搭配指定结果报文，并在接收到测试指令后运行测试程序，通过测试程序从预设结果报文库含有的多个结果报文中获取目标结果报文，根据目标结果报文与指定结果报文生成测试结果。本技术实施例可以在网元设备的业务执行和指令验证过程中，通过测试程序从预设结果报文库获取目标结果报文，以实现对多种类型的网元设备的返回结果的模拟，从而实现对网元设备的业务指令过程的测试，得到与网元设备实际执行业务时返回报文格式相同的目标结果报文。本技术实施例中的测试方法直接在测试平台上运行测试程序，进而从预设结果报文库中确定出目标结果报文并生成测试结果，只需要构建出预设结果报文库，以及在测试平台上模拟出网元设备的运行环境，即可完成测试，不需要在实验室搭建多种类型、数量繁多的网元设备，能够有效降低相关技术中需要部署实验室环境的测试成本。本技术实施例直接通过测试程序模拟网元设备执行业务的输出结果，不仅可以实现网元设备输出的模拟，还可以对模拟流程与实际网元设备进行解耦，既维护了业务逻辑验证流程的完整性，又具有操作简单，安全性高的特点。
[0085]
请参阅图5，图5是本技术的另一示例性实施例示出的测试方法的流程图。该方法可以应用于包含图1所示的测试系统的实施环境，并由该测试系统中的测试平台102执行。
应理解的是，该方法也可以适用于其它的示例性实施环境，并由其它实施环境中的设备具体执行，本实施例不对该方法所适用的实施环境进行限制。
[0086]
在一示例性的实施例中，测试方法至少包括步骤s510至步骤s530，详细介绍如下：
[0087]
步骤s510，获取网元设备执行业务所产生的历史结果数据；其中，历史结果数据包括业务执行成功的结果报文、业务执行失败的结果报文，以及业务错误的结果报文。
[0088]
步骤s520，获取网元设备的网元设备参数、以及网元设备执行业务相关联的业务参数。
[0089]
步骤s530，将网元设备参数、业务参数，以及历史结果数据关联存储至预设结果报文库中。
[0090]
需要说明的是，将业务参数、历史结果数据中包含的业务执行成功的结果报文以及业务执行失败的结果报文按照预设顺序进行排列，得到网元设备执行业务参数对应的业务所产生的结果报文序列。
[0091]
将网元设备执行各个业务参数对应的业务所产生的结果报文序列以及业务错误时的结果报文按照预设顺序进行排列，生成网元设备对应的结果报文序列；
[0092]
将网元设备对应的结果报文序列关联存储至模拟报文数据库中。
[0093]
由上可知，通过网元设备执行业务所产生的历史结果数据构建预设结果报文库，能够保证通过测试程序从预设结果报文库中获取的目标结果报文的准确性，进而提高网元设备的测试的准确性。
[0094]
请参阅图6，图6是本技术的另一示例性实施例示出的测试方法的流程图。该方法可以应用于包含图1所示的测试系统的实施环境，并由该测试系统中的测试平台102执行。应理解的是，该方法也可以适用于其它的示例性实施环境，并由其它实施环境中的设备具体执行，本实施例不对该方法所适用的实施环境进行限制。
[0095]
本技术实施例是在上述实施例的基础上的，在接收测试指令之前，方法还可以包括步骤s610至步骤s620，详细介绍如下：
[0096]
步骤s610，接收针对测试程序的编写指令，并根据编写指令生成测试程序。
[0097]
本技术实施例中的编写指令可以是人工输入的，编写指令中可以包括测试对象、指定结果报文、测试业务等信息，根据编写指令中包含的信息可以对生成测试程序。
[0098]
本技术实施例中的测试程序中可以包括网元设备执行业务的执行流程，可以用于测试网元设备执行业务的逻辑准确性和数据正确性。
[0099]
步骤s620，将测试程序部署在终端设备中，以在终端设备中运行测试程序，得到测试程序所返回的目标结果报文。
[0100]
需要说明的是，在本技术实施例中，步骤s610中接收测试指令的步骤和步骤s620中运行测试程序的步骤也可以调整执行顺序，即，测试平台可以在接收到测试指令之后再运行测试程序，开始测试流程；也可以在测试程序运行之后，由测试程序接收测试指令，本技术实施例中也不对此进行限制。
[0101]
由上可知，本技术实施例的技术方案中在接收到测试程序的编写指令后生成测试程序，可以针对不同网元设备的测试对象生成不同的测试程序，大大提升了不同网元设备的测试效率，此外，通过编写测试程序来模拟网元设备执行业务的输出结果，无需在实验室搭建多种类型、数量繁多的网元设备，能够有效降低测试成本。此外，本技术实施例中的测
试平台可以针对不同的网元设备设置不同的编写指令，从而生成不同的测试程序，通过测试平台的一个测试接口就能够实现多个网元设备的测试，模拟多类网元设备的输出，在很大程度上提高了测试平台的利用效率。
[0102]
图7是本技术的一示例性实施例示出的测试装置的框图。该装置可以应用于图1所示的实施环境，并具体配置在测试平台102中。该装置也可以适用于其它的示例性实施环境，并具体配置在其它设备中，本实施例不对该装置所适用的实施环境进行限制。
[0103]
如图7所示，该示例性的测试装置包括：
[0104]
接收模块710，配置为接收测试指令；其中，测试指令用于指示返回指定结果报文。
[0105]
运行模块720，配置为运行测试程序，以通过测试程序从预设结果报文库含有的多个结果报文中获取目标结果报文，并返回目标结果报文。
[0106]
获取模块730，配置为获取测试程序返回的目标结果报文。
[0107]
生成模块740，配置为根据目标结果报文与指定结果报文，生成测试结果。
[0108]
另一示例性的实施例中，运行模块720包括：
[0109]
运行子模块，配置为运行测试程序，以通过测试程序从预设结果报文库含有的多个结果报文中，确定出与网元设备参数相匹配的候选结果报文，并从候选结果报文中，确定出与业务参数相匹配的目标结果报文；测试指令包括用于执行业务相关联的业务参数以及用于根据业务参数执行业务的网元设备参数。
[0110]
另一示例性的实施例中，运行子模块包括：
[0111]
参数校验单元，配置为对业务参数进行参数校验，得到参数校验结果。
[0112]
目标结果报文确定单元，配置为根据参数校验结果，从业务执行成功的结果报文、业务执行失败的结果报文，以及业务错误的结果报文中，确定出与业务参数相匹配的目标结果报文；候选结果报文包括业务执行成功的结果报文、业务执行失败的结果报文，以及业务错误的结果报文。
[0113]
另一示例性的实施例中，目标结果报文确定单元包括：
[0114]
第一目标结果报文确定子单元，配置为若参数校验结果表征参数校验成功，则从业务参数中获取状态信息，并根据状态信息从业务执行成功的结果报文和业务执行失败的结果报文中，确定出与状态信息相匹配的目标结果报文；
[0115]
第二目标结果报文确定子单元，配置为若参数校验结果表征参数校验失败，则从业务参数中获取错误信息，并将错误信息和业务错误的结果报文进行整合处理，得到与错误信息相匹配的目标结果报文。
[0116]
另一示例性的实施例中，生成模块740包括：
[0117]
第一生成子模块，配置为若目标结果报文与指定结果报文相匹配，则生成用于表征测试成功的测试结果。
[0118]
第二生成子模块，配置为若目标结果报文与指定结果报文不匹配，则生成用于表征测试失败的测试结果。
[0119]
另一示例性的实施例中，测试装置还可以包括：
[0120]
历史结果数据获取模块，配置为获取网元设备执行业务所产生的历史结果数据；其中，历史结果数据包括业务执行成功的结果报文、业务执行失败的结果报文，以及业务错误的结果报文；以及
[0121]
参数获取模块，配置为获取网元设备的网元设备参数、以及网元设备执行业务相关联的业务参数；
[0122]
存储模块，配置为将网元设备参数、业务参数，以及历史结果数据关联存储至预设结果报文库中。
[0123]
另一示例性的实施例中，测试装置还可以包括：
[0124]
测试程序生成模块，配置为接收针对测试程序的编写指令，并根据编写指令生成测试程序；
[0125]
测试程序部署模块，配置为将测试程序部署在终端设备中，以在终端设备中运行测试程序，得到测试程序所返回的目标结果报文。
[0126]
需要说明的是，上述实施例所提供的测试装置与上述实施例所提供的测试方法属于同一构思，其中各个模块和单元执行操作的具体方式已经在方法实施例中进行了详细描述，此处不再赘述。上述实施例所提供的测试装置在实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能，本处也不对此进行限制。
[0127]
本技术的实施例还提供了一种电子设备，包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当一个或多个程序被一个或多个处理器执行时，使得电子设备实现上述各个实施例中提供的测试方法。
[0128]
图8示出了适于用来实现本技术实施例的电子设备的计算机系统的结构示意图。需要说明的是，图8示出的电子设备的计算机系统800仅是一个示例，不应对本技术实施例的功能和使用范围带来任何限制。
[0129]
如图8所示，计算机系统800包括中央处理单元(central processing unit，cpu)801，其可以根据存储在只读存储器(read-only memory，rom)802中的程序或者从储存部分808加载到随机访问存储器(random access memory，ram)803中的程序而执行各种适当的动作和处理，例如执行上述实施例中所述的方法。在ram 803中，还存储有系统操作所需的各种程序和数据。cpu 801、rom 802以及ram 803通过总线804彼此相连。输入/输出(input/output，i/o)接口805也连接至总线804。
[0130]
以下部件连接至i/o接口805：包括键盘、鼠标等的输入部分806；包括诸如阴极射线管(cathode ray tube，crt)、液晶显示器(liquid crystal display，lcd)等以及扬声器等的输出部分807；包括硬盘等的储存部分808；以及包括诸如lan(local area network，局域网)卡、调制解调器等的网络接口卡的通信部分809。通信部分809经由诸如因特网的网络执行通信处理。驱动器810也根据需要连接至i/o接口805。可拆卸介质811，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器810上，以便于从其上读出的计算机程序根据需要被安装入储存部分808。
[0131]
特别地，根据本技术的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本技术的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的计算机程序。在这样的实施例中，该计算机程序可以通过通信部分809从网络上被下载和安装，和/或从可拆卸介质811被安装。在该计算机程序被中央处理单元(cpu)801执行时，执行本技术的系统中限定的各种功能。
[0132]
需要说明的是，本技术实施例所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(erasable programmable read only memory，eprom)、闪存、光纤、便携式紧凑磁盘只读存储器(compact disc read-only memory，cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本技术中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的计算机程序。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的计算机程序可以用任何适当的介质传输，包括但不限于：无线、有线等等，或者上述的任意合适的组合。
[0133]
附图中的流程图和框图，图示了按照本技术各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。其中，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
[0134]
描述于本技术实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现，所描述的单元也可以设置在处理器中。其中，这些单元的名称在某种情况下并不构成对该单元本身的限定。
[0135]
本技术的另一方面还提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如前所述的测试方法。该计算机可读存储介质计算机可读介质可以是上述实施例中描述的电子设备中所包含的，也可以是单独存在，而未装配入该电子设备中。
[0136]
上述内容，仅为本技术的较佳示例性实施例，并非用于限制本技术的实施方案，本领域普通技术人员根据本技术的主要构思和精神，可以十分方便地进行相应的变通或修改，故本技术的保护范围应以权利要求书所要求的保护范围为准。