数据处理方法、装置、手柄及头戴显示系统与流程

1.本公开实施例涉及虚拟现实显示技术领域，更具体地，涉及一种数据处理方法、一种数据处理装置、一种手柄及一种头戴显示系统。


背景技术：

2.随着虚拟现实(virtual reality，vr)技术的进步，出现了各种类型的vr手柄，同时，由于目前所有传感器sensor多数是安装在手柄上的，其仅能获取佩戴者手部的运动数据，并将该佩戴者手部的运动数据作为佩戴者的运动数据，即对vr设备的佩戴者的整个身体的运动数据采集具有很大的局限性，从而不能准确确定佩戴者的运动轨迹，导致手柄存在操作误差。


技术实现要素：

3.本公开实施例的一个目的是提供一种数据处理的新的技术方案。
4.根据本公开实施例的第一方面，提供了一种数据处理方法，所述方法包括：
5.获取头戴显示设备的佩戴者身体不同部位的运动数据；
6.根据所述佩戴者身体不同部位的运动数据，确定目标运动部位；
7.调整所述目标运动部位中各个部位的运动数据的权重；
8.根据调整后的所述目标运动部位中各个部位的运动数据，确定所述佩戴者的运动轨迹。
9.可选地所述根据所述佩戴者身体不同部位的运动数据，确定目标运动部位，包括：
10.根据所述佩戴者身体不同部位的运动数据，确定所述身体不同部位的动作频率信息和振动幅度信息；
11.根据所述身体不同部位的动作频率信息和振动幅度信息，确定目标运动部位。
12.可选地，在所述确定所述佩戴者的运动轨迹之后，还包括：
13.获取所述佩戴者身体不同部位的体征数据；
14.根据所述佩戴者身体不同部位的体征数据，调整所述佩戴者的运动轨迹。
15.可选地，所述体征数据包括心率数据、血氧数据和血压数据中的至少一项或者多项。
16.根据本公开实施例的第二方面，提供了一种数据处理装置，所述装置包括：
17.获取模块，用于获取头戴显示设备的佩戴者身体不同部位的运动数据；
18.第一确定模块，用于根据所述佩戴者身体不同部位的运动数据，确定目标运动部位；
19.调整模块，用于调整所述目标运动部位中各个部位的运动数据的权重；
20.第二确定模块，用于根据调整后的所述目标运动部位中各个部位的运动数据，确定所述佩戴者的运动轨迹。
21.可选地，所述第一确定模块，具体用于：
22.根据所述佩戴者身体不同部位的运动数据，确定所述身体不同部位的动作频率信息和振动幅度信息；
23.根据所述身体不同部位的动作频率信息和振动幅度信息，确定目标运动部位。
24.可选地，所述获取模块，还用于获取所述佩戴者身体不同部位的体征数据；
25.所述调整模块，还用于根据所述佩戴者身体不同部位的体征数据，调整所述佩戴者的运动轨迹。
26.根据本公开实施例的第三方面，提供了一种手柄，包括第一运动传感器，所述手柄还包括：
27.存储器，用于存储可执行的计算机指令；
28.处理器，用于根据所述可执行的计算机指令的控制，执行根据以上第一方面所述的数据处理方法。
29.根据本公开的第四方面，提供了一种头戴显示系统，其包括：
30.头戴显示设备；
31.设置在所述头戴显示设备的佩戴者身体不同部位的第二运动传感器；
32.手柄，所述手柄包括第一运动传感器，所述手柄分别与所述头戴显示设备和各所述第二运动传感器连接。
33.可选地，所述系统还包括设置在所述头戴显示设备的佩戴者身体不同部位的用户体征传感器，所述手柄与各所述用户体征传感器连接。
34.根据本公开的第四方面，提供了一种计算机可读存储介质，其上存储有计算机指令，所述计算机指令被处理器运行时执行以上第一方面所述的方法。
35.本公开实施例的一个有益效果在于，根据该佩戴者身体不同部位的运动数据确定目标运动部位，并调整目标运动部位中各个部位的运动数据的权重，进而根据调整后的目标运动部位中各个部位的运动数据确定佩戴者的运动轨迹，这样可以减少数据处理的负荷，提高处理速度，同时，可以对目标运动部位的运动轨迹进行更精细的识别，从而提高交互或游戏体验。
36.通过以下参照附图对本说明书的示例性实施例的详细描述，本说明书的其它特征及其优点将会变得清楚。
附图说明
37.被结合在说明书中并构成说明书的一部分的附图示出了本说明书的实施例，并且连同其说明一起用于解释本说明书的原理。
38.图1是根据本公开实施例的头戴显示系统的硬件配置示意图；
39.图2a是根据本公开实施例的手柄的硬件配置示意图；
40.图2b是根据本公开实施例的第二运动传感器的分布示意图；
41.图3是根据本公开实施例的数据处理方法的流程示意图；
42.图4是根据本公开实施例的数据处理装置的原理框图；
43.图5是根据本公开实施例的手柄的原理框图。
具体实施方式
44.现在将参照附图来详细描述本公开的各种示例性实施例。应注意到：除非另外具体说明，否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本公开实施例的范围。
45.以下对至少一个示例性实施例的描述实际上仅仅是说明性的，决不作为对本公开及其应用或使用的任何限制。
46.对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论，但在适当情况下，所述技术、方法和设备应当被视为说明书的一部分。。
47.在这里示出和讨论的所有例子中，任何具体值应被解释为仅仅是示例性的，而不是作为限制。因此，示例性实施例的其它例子可以具有不同的值。
48.应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步讨论。
49.《硬件配置》
50.图1是根据本公开实施例的头戴显示系统100的硬件配置的框图。
51.如图1所示，头戴显示系统100包括头戴显示设备110、设置在头戴显示设备的佩戴者身体不同部位的第二运动传感器120、以及手柄130。所述手柄130包括第一运动传感器，所述手柄130分别与所述头戴显示设备110和各所述第二运动传感器120连接。
52.头戴显示设备110例如可以是vr设备、ar(增强现实，augmented reality)设备及mr(混合现实，mixed reality)设备等，本公开实施例对此不作限定。
53.在一个实施例中，如图1所示，手柄130设置有第一运动传感器，通过该第一运动传感器，可以采集手柄的运动数据。第一运动传感器可以是用于检测因用户运动导致的手柄的姿态变化的传感器，该第一运动传感器可以是陀螺仪和水平仪等。
54.在另一实施例中，如图2a所示，手柄130可以包括处理器1100、存储器1200、接口装置1300、通信装置1400、显示装置1500、输入装置1600、扬声器1700和麦克风1800。处理器1100可以包括但不限于中央处理器cpu、微处理器mcu等。存储器1200例如包括rom(只读存储器)、ram(随机存取存储器)、诸如硬盘的非易失性存储器等。接口装置1300例如包括各种总线接口，例如串行总线接口(包括usb接口)、并行总线接口等。通信装置1400例如能够进行有线或无线通信。显示装置1500例如是液晶显示屏、led显示屏、触摸显示屏等。输入装置1600例如包括触摸屏、键盘、手柄等。扬声器1700可以用于输出语音信息。麦克风1800可以用于输入语音信息。
55.本实施例中，手柄130的存储器1200用于存储指令，该指令用于控制处理器1100进行操作以实施或者支持实施根据任意实施例的数据处理方法。技术人员可以根据本说明书所公开方案设计指令。指令如何控制处理器进行操作，这是本领域公知，故在此不再详细描述。
56.本领域技术人员应当理解，尽管在图2a中示出了手柄130的多个装置，但是，本说明书实施例的手柄130可以仅涉及其中的部分装置，也可以还包含其他装置，在此不做限定。
57.第二运动传感器120可以是用于检测因用户运动导致的对应身体部位的姿态变化的传感器，该第一运动传感器120可以是陀螺仪和水平仪等。
58.该第二运动传感器120设置在头戴显示设备110的佩戴者身体不同部位，如图2b所示，例如在佩戴者手臂设置有第二运动传感器1201和第二运动传感器1202。腿部设置第二运动传感器1203、第二运动传感器1204、第二运动传感器1205和第二运动传感器1206，腰部设置有第二运动传感器1207和第二运动传感器1208，肩部设置有第二运动传感器1209、第二运动传感器12010和第二运动传感器12011，颈部设置有第二运动传感器12012。当然，还可以根据实际情况，在佩戴者身体的其他部位设置第二运动传感器120，例如，在佩戴者的背部设置第二运动传感器。当然，还可以是根据实际情况，在佩戴者身体的同一部位设置多个第二运动传感器120，例如在背部设置多个第二运动传感器120。
59.在本实施例中，第二运动传感器120能够与手柄130进行有线或者无线通信，以采集对应部位的运动数据，并将该运动数据传递给手柄130，手柄130根据各第二运动传感器120采集的运动数据和自身设置的第一运动传感器采集的运动数据来确定佩戴者的运动轨迹。
60.本实施例中，头戴显示系统100还包括设置在头戴显示设备的佩戴者身体不同部位的用户体征传感器140，所述手柄130与各所述用户体征传感器140连接。用户体征传感器140可以是用于检测头戴显示设备110的佩戴者的体征(例如心率、血氧、压力等)变化的传感器，例如心率传感器、压力传感器和血氧传感器等。
61.该用户体征传感器140设置在头戴显示设备110的佩戴者身体重要部位，例如在佩戴者手腕设置有用户体征传感器1401和用户体征传感器1402。胸部设置用户体征传感器1403，脸颊设置有用户体征传感器1404和用户体征传感器1405，额头设置有用户体征传感器1406。当然，还可以根据实际情况，在佩戴者身体的其他重要部位设置用户体征传感器140。
62.在本实施例中，第二运动传感器120和用户体征传感器140均能够与手柄130进行有线或者无线通信，其中，第二运动传感器120用于采集对应部位的运动数据，并将该运动数据传递给手柄130。用户体征传感器140用于采集对应部位的体征数据，并将该体征数据传递给手柄130。手柄130根据各第二运动传感器120采集的运动数据和自身设置的第一运动传感器采集的运动数据来确定佩戴者的运动轨迹，并根据各用户体征传感器140采集的体征数据对佩戴者的运动轨迹进行矫正。
63.《方法实施例》
64.图3示出了本公开的一个实施例的数据处理方法，该数据处理方法例如可以由如图1或图2a所示的手柄130实施。
65.如图3所示，该实施例提供的数据处理方法可以包括以下步骤s3100～s3400。
66.步骤s3100，获取头戴显示设备的佩戴者身体不同部位的运动数据。
67.本实施例中，可以在头戴显示设备的佩戴者的不同部位设置第二运动传感器，例如可以在佩戴者的手臂处设置第二运动传感器，又例如可以在佩戴者的上身部位处设置第二运动传感器，再例如可以在佩戴者的下身部位处设置第二运动传感器。根据上述介绍可知，可以在同一部位设置多个第二运动传感器，例如在手臂处设置多个第二运动传感器，又例如在上身部位处设置多个第二运动传感器，再例如在下身部位处设置多个第二运动传感器，关于如何在同一部位设置多个第二运动传感器可以参照上述介绍，本实施例在此不做限定。
68.第二运动传感器可以是用于检测因用户运动导致的对应部位的位置变化的传感器。第一运动传感器可以是用于检测因用户运动导致的手柄的位置变化的传感器，该第一运动传感器可以是陀螺仪和水平仪等。
69.需要说明的是，对于本步骤s3100中手柄的处理器获取头戴显示设备的佩戴者身体不同部位的运动数据的具体方式，可以由设计人员根据使用场景和用户需求自行设置。
70.例如，各第二运动传感器可以通过与手柄的处理器之间建立的蓝牙或者wifi等通信连接，将采集的运动数据实时发送至手柄的处理器。同时，第一运动传感器可以通过与手柄的处理器之间建立的i2c或者spi等物理通信连接，将采集的运动数据发送至手柄的处理器。
71.再例如，手柄的处理器可以按预设时间间隔获取各第二运动传感器和第一运动传感器采集的第一预设时间段内的运动数据。其中，预设时间间隔大于第一预设时间段，例如预设时间间隔为2分钟，第一预设时间段为30秒时，手柄的处理器可以每2分钟获取各第二运动传感器和第一运动传感器采集的30秒的运动数据。
72.在获取头戴显示设备的佩戴者身体不同部位的运动数据之后，进入：
73.步骤s3200，根据所述佩戴者身体不同部位的运动数据，确定目标运动部位。
74.本实施例中，手柄的处理器在获取各第二运动传感器采集的运动数据和第一运动传感器采集的运动数据之后，便可根据该各第二运动传感器采集的运动数据和第一运动传感器采集的运动数据，确定佩戴者的目标运动部位。
75.在本实施例中，本步骤s3200中根据所述佩戴者身体不同部位的运动数据，确定目标运动部位可以进一步包括如下步骤s3210～步骤s3220：
76.步骤s3210，根据所述佩戴者身体不同部位的运动数据，确定所述身体不同部位的动作频率信息和振动幅度信息。
77.本步骤s3210中，手柄的处理器可以根据各第二运动传感器采集的运动数据和第一运动传感器采集的运动数据，初步判断佩戴者的位姿变化，例如初步判断是手臂挥舞、上半身移动、下半身(包括腿部、脚腕)移动。
78.示例性地，手柄上的第一运动传感器采集的运动数据在第二设定时间段内的变化量超过设定阈值，则说明手柄发生了位姿变化例如佩戴者手臂挥舞。该第二设定时间段可以是200ms。
79.示例性地，肩部的第二运动传感器采集的运动数据、颈部的第二运动传感器采集的运动数据、背部的第二运动传感器采集的运动数据、胸部的第二运动传感器采集的运动数据等上身部位处的第二运动传感器采集的运动数据在第二设定时间段内的变化量超过设定阈值，则说明佩戴者的上半身发生了位姿变化。
80.示例性地，腿部的第二运动传感器采集的运动数据在第二设定时间段内的变化量超过设定阈值，则说明佩戴者的腿部发生了位姿变化。
81.步骤s3220，根据所述身体不同部位的动作频率信息和振动幅度信息，确定目标运动部位。
82.例如，手柄的处理器初步判断佩戴者的位姿变化，例如初步判断仅是手臂挥舞的情况下，会将佩戴者的手臂确定为目标运动部位，并根据后续步骤s3300对该目标运动部位中各个部位的运动数据进行精细化的位姿计算。
83.又例如，手柄的处理器初步判断佩戴者的位姿变化，例如初步判断仅是上半身位姿变化的情况下，会将佩戴者的上半身确定为目标运动部位，并根据后续步骤s3300对该目标运动部位中各个部位的运动数据进行精细化的位姿计算。
84.在根据所述佩戴者身体不同部位的运动数据，确定目标运动部位之后，进入：
85.步骤s3300，调整所述目标运动部位中各个部位的运动数据的权重。
86.例如，在目标运动部位为佩戴者的手臂的情况下，手柄的处理器会对手柄的第一运动传感器采集的运动数据、及手臂处的第二运动传感器的运动数据进行精细化的位姿计算。具体的，可以分别调高手柄的第一运动传感器采集的运动数据的权重和手臂处的第二运动传感器采集的运动数据的权重。
87.又例如，在目标运动部位为佩戴者的上半身的情况下，手柄的处理器会对肩部处的第二运动传感器采集的运动数据、颈部处的第二运动传感器采集的运动数据、背部处的第二运动传感器采集的运动数据、胸部处的第二运动传感器采集的运动数据进行精细化的位姿计算。具体的，可以分别调高肩部处的第二运动传感器采集的运动数据、颈部处的第二运动传感器采集的运动数据、背部处的第二运动传感器采集的运动数据、胸部处的第二运动传感器采集的运动数据的权重。
88.可以理解的是，其是分别计算手柄和手臂、佩戴者上半身、佩戴者腿部等位置处的运动传感器的运动数据，从而能够得到佩戴者身体各个部位的运动数据，减少了手柄的处理器的数据处理负荷，节省数据计算的时间，提高了计算效率、减少了响应延迟。
89.在调整所述目标运动部位中各个部位的运动数据的权重之后，进入：
90.步骤s3400，根据调整后的所述目标运动部位中各个部位的运动数据，确定所述佩戴者的运动轨迹。
91.在一个例子中，手柄的处理器在调整目标运动部位中各个部位的运动数据的权重之后，可以仅根据该调整后的目标运动部位中各个部位的运动数据，确定佩戴者的运动轨迹。
92.例如，在目标运动部位为佩戴者的手臂的情况下，手柄的处理器会调高手柄的第一运动传感器采集的运动数据的权重和手臂处的第二运动传感器采集的运动数据的权重，并仅根据该调整后的手柄的第一运动传感器采集的运动数据和手臂处的第二运动传感器采集的运动数据，确定佩戴者的运动轨迹。
93.在一个例子中，手柄的处理器在调整目标运动部位中各个部位的运动数据的权重之后，可以将调整后的目标运动部位中各个部位的运动数据，并融合除目标运动部位外的佩戴者身体其他部位的运动数据，确定佩戴者的运动轨迹。
94.例如，在目标运动部位为佩戴者的手臂的情况下，手柄的处理器会调高手柄的第一运动传感器采集的运动数据的权重和手臂处的第二运动传感器采集的运动数据的权重，可以根据该调整后的手柄的第一运动传感器采集的运动数据和手臂处的第二运动传感器采集的运动数据，融合除手柄的第一运动传感器和手臂的第二运动传感器之外的佩戴者身体其他部位的运动传感器采集的运动数据，确定佩戴者的运动轨迹。
95.根据本技术实施例，手柄能够获取头戴显示设备的佩戴者身体不同部位的运动数据，以矫正单一手柄传感器采集数据的局限性，优化手柄操作准确性。同时，其会先根据该佩戴者身体不同部位的运动数据确定目标运动部位，并调整目标运动部位中各个部位的运
动数据的权重，进而根据调整后的目标运动部位中各个部位的运动数据，便可确定佩戴者的运动轨迹，这样可以减少数据处理的负荷，提高处理速度。
96.在一个实施例中，头戴显示设备还包括设置在佩戴者身体不同部位的用户体征传感器，用户体征传感器包括心率传感器、压力传感器和血氧传感器中至少一项。该用户体征传感器设置在头戴显示设备的佩戴者身体重要部位，例如设置在佩戴者手腕处、胸部、脸颊、额头。当然，还可以根据实际情况，在佩戴者身体的其他重要部位设置用户体征传感器。
97.在此，在执行以上步骤s3400根据调整后的所述目标运动部位中各个部位的运动数据，确定所述佩戴者的运动轨迹之后，本公开实施例的数据处理方法还进一步包括如下步骤s4100～步骤s4200：
98.步骤s4100，获取所述佩戴者身体不同部位的体征数据。
99.所述体征数据包括心率数据、血氧数据和血压数据中的至少一项或者多项。
100.本实施例中，可以通过佩戴者身体不同部位的用户体征传感器采集对应部位的体征数据。
101.例如，各用户特征传感器可以通过与手柄的处理器之间建立的蓝牙或者wifi等无线通信连接，将采集的体征数据实时发送至手柄的处理器。
102.再例如，手柄的处理器可以按预设时间间隔获取各用户体征传感器采集的第一预设时间段内的体征数据。其中，预设时间间隔大于第一预设时间段，例如预设时间间隔为2分钟，第一预设时间段为30秒时，手柄的处理器可以每2分钟获取各用户体征传感器采集的30秒的体征数据。
103.步骤s4200，根据所述佩戴者身体不同部位的体征数据，调整所述佩戴者的运动轨迹。
104.本实施例中，在确定佩戴者的运动轨迹之后，手柄的处理器还会结合用户体征传感器采集的体征数据，增加心率、血氧、压力等体征数据，进一步矫正佩戴者的运动轨迹。
105.根据本实施例，手柄能够获取头戴显示设备的佩戴者身体不同部位的运动数据和体征数据，以矫正单一手柄传感器采集数据的局限性，优化手柄操作准确性。同时，其在根据该佩戴者身体不同部位的运动数据确定目标运动部位，并调整目标运动部位中各个部位的运动数据的权重，进而根据调整后的目标运动部位中各个部位的运动数据确定佩戴者的运动轨迹之后，会基于体征数据对该佩戴者的运动轨迹进行校正，从而能够进一步优化单一手柄的操作精确度和操作命令的力度，减少数据处理的负荷，提高处理速度，同时为vr设备的各种内容场景提高更多的数据。
106.《装置实施例》
107.本公开实施例提供了一种数据处理装置，应用于手柄，如图4所示，该数据处理装置400可以包括获取模块410、第一确定模块420、调整模块430和第二确定模块440。
108.获取模块410，用于获取头戴显示设备的佩戴者身体不同部位的运动数据。
109.第一确定模块420，用于根据所述佩戴者身体不同部位的运动数据，确定目标运动部位。
110.调整模块430，用于调整所述目标运动部位中各个部位的运动数据的权重。
111.第二确定模块440，用于根据调整后的所述目标运动部位中各个部位的运动数据，确定所述佩戴者的运动轨迹。
112.在一个实施例中，所述第一确定模块420，具体用于：根据所述佩戴者身体不同部位的运动数据，确定所述身体不同部位的动作频率信息和振动幅度信息；根据所述身体不同部位的动作频率信息和振动幅度信息，确定目标运动部位。
113.在一个实施例中，所述获取模块410，还用于获取所述佩戴者身体不同部位的体征数据。
114.所述调整模块430，还用于根据所述佩戴者身体不同部位的体征数据，调整所述佩戴者的运动轨迹。
115.在一个实施例中，所述体征数据包括心率数据、血氧数据和血压数据中的至少一项或者多项。
116.《设备实施例》
117.图5是根据一个实施例的手柄的硬件结构示意图。如图5所示，该手柄500包括第一运动传感器510，该手柄500还包括处理器520和存储器530。
118.该存储器530可以用于存储可执行的计算机指令。
119.该处理器520可以用于根据所述可执行的计算机指令的控制，执行根据本公开方法实施例所述的数据处理方法。
120.该手柄500可以是如图1所示的手柄130，也可以是具备其他硬件结构的设备，在此不做限定。
121.在另外的实施例中，该手柄500可以包括以上数据处理装置400。
122.在一个实施例中，以上手柄的数据处理装置400的各模块可以通过处理器520运行存储器530中存储的计算机指令实现。
123.《计算机可读存储介质》
124.本公开实施例还提供了一种计算机可读存储介质，其上存储有计算机指令，所述计算机指令被处理器运行时执行本公开实施例提供的数据处理方法。
125.本公开可以是系统、方法和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质，其上载有用于使处理器实现本公开的各个方面的计算机可读程序指令。
126.计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：便携式计算机盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、静态随机存取存储器(sram)、便携式压缩盘只读存储器(cd-rom)、数字多功能盘(dvd)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身，诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如，通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
127.这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备，或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计
算机可读程序指令，并转发该计算机可读程序指令，以供存储在各个计算/处理设备中的计算机可读存储介质中。
128.用于执行本公开操作的计算机程序指令可以是汇编指令、指令集架构(isa)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码，所述编程语言包括面向对象的编程语言—诸如smalltalk、c++等，以及常规的过程式编程语言—诸如“c”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络—包括局域网(lan)或广域网(wan)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中，通过利用计算机可读程序指令的状态信息来个性化定制电子电路，例如可编程逻辑电路、现场可编程门阵列(fpga)或可编程逻辑阵列(pla)，该电子电路可以执行计算机可读程序指令，从而实现本公开的各个方面。
129.这里参照根据本公开实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本公开的各个方面。应当理解，流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合，都可以由计算机可读程序指令实现。
130.这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器，从而生产出一种机器，使得这些指令在通过计算机或其它可编程数据处理装置的处理器执行时，产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中，这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作，从而，存储有指令的计算机可读介质则包括一个制造品，其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
131.也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上，使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤，以产生计算机实现的过程，从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
132.附图中的流程图和框图显示了根据本公开的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分，所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。对于本领域技术人员来说公知的是，通过硬件方式实现、通过软件方式实现以及通过软件和硬件结合的方式实现都是等价的。
133.以上已经描述了本公开的各实施例，上述说明是示例性的，并非穷尽性的，并且也
不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择，旨在最好地解释各实施例的原理、实际应用或对市场中的技术改进，或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。本公开的范围由所附权利要求来限定。