数据读写方法、分布式存储系统、装置、设备和存储介质与流程

1.本公开涉及人工智能领域，具体涉及云计算、云存储和内容分发技术，可应用在智能云场景下，尤其涉及一种数据读写方法、分布式存储系统、装置、设备和存储介质。


背景技术：

2.分布式存储技术是指将数据分散存储在多台机器上。典型的分布式存储系统包括：客户端、元数据服务器和数据存储服务器。数据存储服务器用于存储用户数据；元数据服务器用于存储用户数据的元数据，元数据例如为用户数据的存储位置信息；客户端是用户使用分布式存储系统的入口，基于用户的读写请求消息对目标数据进行读写操作。
3.相关技术中，客户端可以从元数据服务器获取目标数据的存储位置信息，基于存储位置信息对目标数据进行读写操作。


技术实现要素：

4.本公开提供了一种数据读写方法、分布式存储系统、装置、设备和存储介质。
5.根据本公开的一方面，提供了一种数据读写方法，包括：响应于针对目标数据的读写请求消息，确定所述目标数据所属的存储池内的多个存储节点，所述多个存储节点包括所述目标数据所在的目标存储节点，且，所述多个存储节点中的至少一个存储节点内存储所述目标存储节点的标识信息；查询所述多个存储节点，以获取所述目标存储节点的标识信息；基于所述目标存储节点的标识信息，将所述读写请求消息发送至所述目标存储节点，以对所述目标存储节点内的所述目标数据进行读写操作。
6.根据本公开的另一方面，提供了一种分布式存储系统，包括：客户端和多个存储节点；所述多个存储节点包括目标数据所在的目标存储节点，且，所述多个存储节点中的至少一个存储节点内存储所述目标存储节点的标识信息；所述客户端，用于响应于针对所述目标数据的读写请求消息，确定所述目标数据所属的存储池内的所述多个存储节点；查询所述多个存储节点，以获取所述目标存储节点的标识信息；以及，基于所述目标存储节点的标识信息，将所述读写请求消息发送至所述目标存储节点，以对所述目标存储节点内的所述目标数据进行读写操作。
7.根据本公开的另一方面，提供了一种数据读写装置，包括：确定模块，用于响应于针对目标数据的读写请求消息，确定所述目标数据所属的存储池内的多个存储节点，所述多个存储节点包括所述目标数据所在的目标存储节点，且，所述多个存储节点中的至少一个存储节点内存储所述目标存储节点的标识信息；查询模块，用于查询所述多个存储节点，以获取所述目标存储节点的标识信息；读写模块，用于基于所述目标存储节点的标识信息，将所述读写请求消息发送至所述目标存储节点，以对所述目标存储节点内的所述目标数据进行读写操作。
8.根据本公开的另一方面，提供了一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器
执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如上述任一方面的任一项所述的方法。
9.根据本公开的另一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据上述任一方面的任一项所述的方法。
10.根据本公开的另一方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现根据上述任一方面的任一项所述的方法。
11.根据本公开的技术方案，可以提高读写操作的可用性。
12.应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
13.附图用于更好地理解本方案，不构成对本公开的限定。其中：
14.图1是根据本公开第一实施例的示意图；
15.图2是本公开实施例对应的应用场景的示意图；
16.图3是本公开实施例中存储节点所存储的副本信息的示意图；
17.图4是根据本公开第二实施例的示意图；
18.图5是本公开实施例中获取目标存储节点的标识信息的示意图；
19.图6是根据本公开第三实施例的示意图；
20.图7是根据本公开第四实施例的示意图；
21.图8是用来实现本公开实施例的数据读写方法的电子设备的示意图。
具体实施方式
22.以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
23.相关技术中，客户端可以从元数据服务器获取目标数据的存储位置信息，基于存储位置信息对目标数据进行读写操作。目标数据的存储位置信息具体为目标数据所在的目标存储节点的标识信息。
24.但是，若元数据服务器发生故障，客户端无法获取目标数据的存储位置信息，进而无法对目标数据进行读写操作，因此，客户端从元数据服务器获取目标数据的存储位置信息的方式，可用性较差。
25.为了提高读写操作的可用性，本公开提供如下实施例。
26.图1是根据本公开第一实施例的示意图，本实施例提供一种数据读写方法，该方法包括：
27.101、响应于针对目标数据的读写请求消息，确定所述目标数据所属的存储池内的多个存储节点，所述多个存储节点包括所述目标数据所在的目标存储节点，且，所述多个存储节点中的至少一个存储节点内存储所述目标存储节点的标识信息。
28.102、查询所述多个存储节点，以获取所述目标存储节点的标识信息。
29.103、基于所述目标存储节点的标识信息，将所述读写请求消息发送至所述目标存储节点，以对所述目标存储节点内的所述目标数据进行读写操作。
30.本实施例的数据读写方法可以由分布式存储系统中的客户端执行。
31.读写请求消息可以来自于用户终端，即，用户需要对目标数据进行读写操作时，可以通过用户终端向分布式存储系统的客户端发送读写请求消息。用户终端可以包括：个人电脑(personal computer、pc)、移动设备、智能家居设备、智能家居设备、可穿戴式设备等，移动设备例如包括手机、便携式电脑、平板电脑等，智能家居设备例如包括智能音箱、智能电视等，可穿戴式设备例如包括智能手表、智能眼镜等。
32.目标数据，是指用户待读写操作的数据，例如，网页数据、游戏数据、音视频数据等。
33.读写请求消息中可以包含目标数据的标识信息，以表明是针对目标数据的读写请求消息。
34.目标数据的标识信息，例如为统一资源定位器(uniform resource locator，url)地址，或者，也可以为目标数据所在的应用(application，app)的名称等。
35.客户端内可以预先配置数据与存储池(pool)之间的映射关系，基于该映射关系，可以确定目标数据所属的存储池。
36.其中，每个存储池内可以包括多个存储节点，存储节点可以具体为服务器、磁盘等，每个存储池内的多个存储节点是可更新的。
37.客户端可以获取存储池与存储池内的多个存储节点之间的映射关系，因此，基于该映射关系，可以确定目标数据所属的存储池内的多个存储节点。
38.由于多个存储节点中的至少一个存储节点内存储目标存储节点的标识信息，因此，可以通过对多个存储节点进行查询，以获取目标存储节点的标识信息。
39.其中，存储节点可以用互联网协议地址(internet protocol，ip)地址和端口号，或者，编号，或者，名称等进行标识。
40.以用ip地址和端口号进行标识为例，目标存储节点的标识信息为目标存储节点的ip地址和端口号。
41.获取目标存储节点的标识信息后，可以基于该标识信息将读写请求消息发送至对应的目标存储节点，对目标数据进行读写操作。
42.读写操作例如可以包括：读取、写入、增加、修改、删除等操作。
43.本实施例中，通过查询存储节点，以获取目标存储节点的标识信息，可以在元服务器不可用时依然可以获取到目标存储节点的标识信息，进而可以基于目标存储节点的标识信息将读写请求消息发送至目标存储节点，以对目标存储节点内的目标数据进行读写操作，提高读写操作的可用性。
44.为了更好地理解本公开实施例，对本公开实施例的应用场景进行说明。
45.图2是本公开实施例对应的应用场景的示意图。本实施例以基于raft的分布式存储系统为例。raft是一种简单方便易于理解的分布式算法，主要解决了分布式中的一致性问题。
46.如图2所示，基于raft的分布式存储系统包括：客户端(client)201、元数据服务器
202和存储节点(blockserver)，多个存储节点可以组成存储池203。
47.分布式存储场景下，一份数据可以复制为多份，每份数据可以称为一个副本，多个副本组成一个复制组(replicate group，rg)，每个副本存储在一个存储节点上。
48.组成rg的多个副本可以包括主副本(leader)和从副本(follower)，主副本为一个，从副本为多个，例如，每个rg包括一个主副本和两个从副本。
49.如图2所示，不同的rg分别用rg0、rg1、rg2等表示，以rg0为例，同一个rg的副本用rg0_#1、rg0_#2、rg0_#3表示。
50.多个存储节点可以组成一个存储池(pool)，图2中以一个存储池内包括第一存储节点、第二存储节点、第三存储节点和第四存储节点为例。
51.用户需要对目标数据进行读写操作时，可以通过用户终端发送读写请求消息，读写请求消息中可以包含目标数据的标识信息。
52.客户端内可以预先配置数据的标识信息与存储池的标识信息之间的映射关系，因此，基于该映射关系，可以确定目标数据所属的存储池。
53.客户端还可以定期从元数据服务器获取存储池与存储池内的多个存储节点之间的映射关系，之后再基于该映射关系，可以确定目标数据所属的存储池内的多个存储节点。
54.针对不同的目标数据，若目标数据所属的存储池为同一个，则在相同周期内，即使目标数据不同，目标数据所属的存储池内的多个存储节点也是相同的。例如，如图2所示，目标数据为rg0或rg1或rg2，由于rg0～rg2对应相同的存储池，则这些目标数据对应的多个存储节点均为图2所示的第一存储节点～第五存储节点。
55.针对同一个rg，该rg内的各个副本所在的存储节点上可以存储主副本和从副本的信息，该信息用于指示哪个副本为主副本，哪个副本为从副本，以及，用于指示主副本以及从副本所在的存储节点。以rg0为例，如图2所示，rg0的三个副本分别位于第一存储节点、第三存储节点和第四存储节点上，则第一存储节点、第三存储节点和第四存储节点内均存储rg0的所有副本的信息。
56.其中，rg0的所有副本的信息可以如图3所示，可以记录各个副本是主副本或从副本，以及，主副本和从副本所在的存储节点的信息。
57.若目标数据是包括多个副本的数据，例如rg中的某个副本，则目标存储节点是指主副本所在的存储节点。以rg0为例，假设rg0_#1为主副本，由于rg0_#1位于第一存储节点上，则针对目标数据是rg0时，目标存储节点是第一存储节点。
58.另外，为了保持数据一致性，还可以对从副本进行读写操作，以rg0为例，假设rg0_#2和rg0_#3是从副本，由于rg0_#2位于第三存储节点上，rg0_#3位于第四存储节点上，客户端除了将读写请求消息发送至主副本所在的第一存储节点上，对主副本进行读写操作之外，还可以将读写请求消息发送至从副本所在的第二存储节点和第三存储节点上，对从副本进行读写操作。从而可以保持rg0的各个副本的数据一致性。
59.结合上述应用场景，本公开实施例还提供一种数据读写方法。
60.图4是根据本公开第二实施例的示意图，本实施例提供一种数据读写方法，该方法包括：
61.401、客户端，基于预设周期从元数据服务器获取存储池与存储池内的多个存储节点之间的映射关系。
62.其中，由于存储池与其内的存储节点之间的映射关系的更改并不频繁，因此，预设周期可以不用很频繁，例如，预设周期为1小时，从而可以降低对元数据服务器的干扰。
63.可以理解的是，在一些场景下，若存储池与其内的存储节点的关系更为固定，则可以直接将该映射关系配置在客户端内。
64.本实施例中，通过基于预设周期从元数据服务器获取上述的映射关系，可以保证映射关系的准确度，提高读写操作的可靠性。
65.402、客户端，接收到用户终端发送的读写请求消息后，判断本地或元数据服务器内是否存储目标存储节点的标识信息，若是，执行403，否则，执行404。
66.其中，用户需要对目标数据进行读写操作时，可以通过用户终端发送读写请求消息，读写请求消息中可以包含目标数据的标识信息。
67.目标数据，是指用户待读写操作的数据，例如，网页数据、游戏数据、音视频数据等。
68.目标数据的标识信息，例如为url地址等。
69.为了提高读写效率，若客户端获取过目标数据，客户端会在本地缓存目标数据的标识信息以及目标存储节点的标识信息之间的映射关系，之后可以基于本地缓存的信息直接获取目标存储节点的标识信息，而不需要向元数据服务器或者存储节点进行查询。
70.若客户端未缓存目标数据对应的目标存储节点的标识信息，可以向元数据服务器进行查询。
71.其中，目标数据的分布情况是变化较为频繁的，以rg0为例，rg0具体分布在哪个或哪些存储节点上是变化较为频繁的，为了保证准确性，需要在接收到读写请求消息后确定当前的目标数据所在的存储节点。
72.一般来讲，元数据服务器内会记录当前的目标数据所在的存储节点的信息，因此，客户端可以向元数据服务器查询目标存储节点的标识信息。
73.但是，若元数据服务器发生故障后，客户端无法从元数据服务器获取到目标存储节点的标识信息。
74.403、客户端，从本地或者元数据服务器，获取目标存储节点的标识信息。
75.404、客户端，基于存储池与存储池内的多个存储节点之间的映射关系，确定所述目标数据所属的存储池内的多个存储节点。
76.其中，以图2所示的结构为例，目标数据所属的存储池内的多个存储节点分别为第一存储节点～第四存储节点。
77.405、客户端，依次向所述多个存储节点中的单个存储节点发送第一查询请求消息，所述第一查询请求消息用于查询所述单个存储节点内是否存储所述目标数据。
78.其中，客户端依次向单个存储节点发送查询请求消息，是指按设定顺序对每个存储节点进行查询，避免遗漏，例如，可以向第一存储节点发送查询请求消息，若第一存储节点内未存储目标数据，则向第二存储节点发送查询请求消息，若第二存储节点内未存储目标数据，则向第三存储节点发送查询请求消息，依此类推。
79.为了区分，用于查询是否存储目标数据的查询请求消息可以称为第一查询请求消息。
80.406、接收到查询请求消息的存储节点，判断自身是否存储所述目标数据，若是，执
行408，否则执行407。
81.其中，若目标数据存在多个副本，则任一副本所在的存储节点内均存储目标数据。
82.以目标数据是rg0为例，rg0对应三个副本，分别是rg0_#1、rg0_#2和rg0_#3，相应的存储节点是第一存储节点、第四存储节点和第三存储节点，则表明第一存储节点、第四存储节点和第三存储节点内均存储目标数据。
83.407、接收到第一查询请求消息的存储节点，向客户端发送第一查询响应消息，所述第一查询响应消息用于表明未存储所述目标数据。
84.其中，与第一查询请求消息对应的响应可以称为第一查询响应消息。
85.结合图2所示的架构，例如，目标数据是rg1，客户端向第一存储节点发送第一查询请求消息，第一查询请求消息中包含rg1的标识信息，由于第一存储节点内未存储rg1的任一副本，此时，第一存储节点发送的第一查询响应消息中可以包含用于表明未存储目标数据的指示信息(如no exist)。
86.之后，客户端可以向下一个存储节点继续发送第一查询请求消息，直至查询到用于表明存储所述目标数据的第一查询响应消息。
87.本实施例中，通过依次向单个存储节点发送第一查询请求消息，直至接收到用于表明存储所述目标数据的第一查询响应消息，可以基于所述用于表明存储所述目标数据的第一查询响应消息，获取目标存储节点的标识信息，进而可以基于目标存储节点的标识信息对目标数据进行读写操作，保证读写操作的正常执行。
88.408、接收到第一查询请求消息的存储节点，向客户端发送第一查询响应消息，所述第一查询响应消息用于表明存储所述目标数据。
89.结合图2所示的架构，例如，目标数据是rg0，客户端向第一存储节点发送第一查询请求消息，第一查询请求消息中包含rg0的标识信息，由于第一存储节点内存储有rg0，此时，第一存储节点发送的第一查询响应消息中可以包含用于表明存储目标数据的指示信息(如exist)。
90.409、客户端，基于所述第一查询响应消息，获取所述目标存储节点的标识信息。
91.其中，针对408的存储节点是主副本所在的存储节点或者从副本所在的存储节点，第一查询响应消息中可以包含不同内容，进而可以采用不同的方式获取目标存储节点标识信息。具体内容可以参见后续描述。
92.另外，客户端获取到目标存储节点的标识信息后，还可以存储目标数据与目标存储节点之间的映射关系，从而后续还需要对该目标数据进行读写操作时，可以直接基于客户端本地缓存的映射关系获取目标存储节点的标识信息。
93.410、客户端，基于所述目标存储节点的标识信息，将所述读写请求消息发送至所述目标存储节点，以对所述目标存储节点内的所述目标数据进行读写操作。
94.其中，针对目标数据存在多个副本的情况，目标存储节点包括：主副本所在的存储节点，以及从副本所在的存储节点，之后，可以向主副本和从副本所在的存储节点均发送读写请求消息，以对各个副本所在的存储节点内的目标数据对应的各个副本进行读写操作。
95.例如，目标数据是rg0，rg0的各个副本分别位于第一存储节点、第三存储节点和第四存储节点上，因此，结合图2，客户端可以分别向第一存储节点、第三存储节点和第四存储节点发送读写请求消息，以对rg0的各个副本(rg0_#1、rg0_#3、rg0_#2)进行读写操作。
96.其中，如图5所示，基于第一查询响应消息获取目标存储节点的标识信息可以包括：
97.501、存储目标数据的存储节点，判断自身是否为所述目标数据对应的主副本所在的存储节点，若是，执行502，否则，执行504。
98.其中，以目标数据是rg0为例，rg0的各个副本所在的存储节点内均会记录rg0的所有副本的信息，例如，哪个副本是主副本，哪个副本是从副本，主副本以及从副本所在的存储节点的标识信息等，因此，存储目标数据的存储节点基于记录的目标数据对应的所有副本的信息，可以确定自身是主副本所在的存储节点或者从副本所在的存储节点，并且若自身是从副本所在的存储节点，还可以获取到主副本所在的存储节点的标识信息。
99.502、存储目标数据的存储节点，向客户端反馈第一查询响应消息，所述第一查询响应消息中包含所述目标数据对应的所有副本所在的存储节点的标识信息。
100.503、客户端，从所述第一查询响应消息中获取所述目标数据对应的所有副本所在的存储节点的标识信息，作为目标存储节点的标识信息。
101.例如，以目标数据是rg0为例，第一存储节点反馈的第一查询响应消息中不仅可以包含用于指示存储目标数据的指示信息，还可以包含rg0的所有副本所在的存储节点的标识信息，即第一存储节点的标识信息、第三存储节点的标识信息和第四存储节点的标识信息，之后，客户端将第一存储节点的标识信息、第三存储节点的标识信息和第四存储节点的标识信息作为目标存储节点的标识信息。
102.本实施例中，若查询到主副本所在的存储节点，主副本所在的存储节点可以将所有副本所在的存储节点的标识信息反馈给客户端，保证标识信息的准确度和获取效率，进而提高读写操作的准确性和效率。
103.504、存储目标数据的存储节点，向客户端反馈第一查询响应消息，所述第一查询响应消息中包含所述目标数据对应的主副本所在的存储节点的标识信息。
104.505、客户端，从所述第一查询响应消息中获取所述主副本所在的存储节点的标识信息，基于所述主副本所在的存储节点的标识信息，向所述主副本所在的存储节点发送第二查询请求消息，所述第二查询请求消息用于查询所述主副本所在的存储节点内存储的目标存储节点的标识信息。
105.结合图2所示的架构，以目标数据是rg2为例，假设rg2的主副本是rg2_#1，从副本是rg2_#2和rg2_#3，由于第一存储节点存储的是rg2_#2，是从副本，则第一存储节点反馈的第一查询响应消息中不仅可以包含用于指示存储目标数据的指示信息，还包含rg2对应的主副本(即rg2_#1)所在的存储节点(即第三存储节点)的标识信息。
106.客户端从第一查询响应消息中获取第三存储节点的标识信息后，可以向第三存储节点发送第二查询请求消息。
107.506、主副本所在的存储节点，响应于第二查询请求消息，向客户端反馈第二查询响应消息，所述第二查询响应消息中包含所述目标数据对应的所有副本所在的存储节点的标识信息。
108.例如，针对目标数据rg2，假设第三存储节点内存储的目标存储节点的标识信息分别是第一存储节点的标识信息、第二存储节点的标识信息和第三存储节点的标识信息，则第二查询响应消息中可以包含上述三个存储节点的标识信息。
109.由于主副本所在的存储节点中的信息是最新的，因此，从主副本所在的存储节点获取目标存储节点标识信息，可以保证所获取的目标存储节点的标识信息是最新的，提高准确性，进而保证读写操作的准确性。
110.507、客户端，从所述第二查询响应消息中获取所述目标数据对应的所有副本所在的存储节点的标识信息，作为目标存储节点的标识信息。
111.例如，针对rg2，可以获取目标存储节点的标识信息为：第一存储节点的标识信息、第二存储节点的标识信息和第三存储节点的标识信息。
112.本实施例中，若查询到从副本所在的存储节点，客户端还向主副本所在的存储节点查询目标存储节点的标识信息，可以保证获取到最新的标识信息，保证标识信息的准确度，进而提高读写操作的准确性。
113.图6是根据本公开第三实施例的示意图，本实施例提供一种分布式存储系统，该系统600包括：客户端601和多个存储节点602。
114.所述多个存储节点602包括目标数据所在的目标存储节点，且，所述多个存储节点中的至少一个存储节点内存储所述目标存储节点的标识信息；所述客户端601用于响应于针对所述目标数据的读写请求消息，确定所述目标数据所属的存储池内的所述多个存储节点；查询所述多个存储节点，以获取所述目标存储节点的标识信息；以及，基于所述目标存储节点的标识信息，将所述读写请求消息发送至所述目标存储节点，以对所述目标存储节点内的所述目标数据进行读写操作。
115.本实施例中，通过查询存储节点，以获取目标存储节点的标识信息，可以在元服务器不可用时依然可以获取到目标存储节点的标识信息，进而可以基于目标存储节点的标识信息将读写请求消息发送至目标存储节点，以对目标存储节点内的目标数据进行读写操作，提高读写操作的可用性。
116.一些实施例中，所述系统600还包括：元数据服务器。
117.所述元数据服务器用于记录存储池与存储池内的多个存储节点之间的映射关系；所述客户端601进一步用于：基于预设周期，从所述元数据服务器获取所述映射关系；以及，若所述客户端本地未缓存所述目标存储节点的标识信息，且，从所述元数据服务器未获取所述目标存储节点的标识信息，基于所述映射关系，确定所述多个存储节点。
118.本实施例中，通过基于预设周期从元数据服务器获取上述的映射关系，可以保证映射关系的准确度，提高读写操作的可靠性。
119.一些实施例中，所述客户端601进一步用于：依次向所述多个存储节点中的单个存储节点发送第一查询请求消息，所述第一查询请求消息用于查询所述单个存储节点内是否存储所述目标数据，直至接收到第一查询响应消息，所述第一查询响应消息用于表明存储所述目标数据；
120.基于所述第一查询响应消息，获取所述目标存储节点的标识信息。
121.本实施例中，通过依次向单个存储节点发送第一查询请求消息，直至接收到用于表明存储所述目标数据的第一查询响应消息，可以基于所述用于表明存储所述目标数据的第一查询响应消息，获取目标存储节点的标识信息，进而可以基于目标存储节点的标识信息对目标数据进行读写操作，保证读写操作的正常执行。
122.一些实施例中，所述目标数据存在多个副本，所述多个副本包括：主副本和从副
本；所述目标存储节点包括：所述主副本所在的存储节点，以及，所述从副本所在的存储节点；所述多个存储节点包括：存储所述目标数据的存储节点；所述存储所述目标数据的存储节点用于：若所述存储所述目标数据的存储节点是所述主副本所在的存储节点，将所述目标数据对应的所有副本所在的存储节点的标识信息携带在所述第一查询响应消息中；所述客户端601进一步用于：从所述第一查询响应消息中，获取所述所有副本所在的存储节点的标识信息，作为所述目标存储节点的标识信息。
123.本实施例中，若查询到主副本所在的存储节点，主副本所在的存储节点可以将所有副本所在的存储节点的标识信息反馈给客户端，保证标识信息的准确度和获取效率，进而提高读写操作的准确性和效率。
124.一些实施例中，所述目标数据存在多个副本，所述多个副本包括：主副本和从副本；所述目标存储节点包括：所述主副本所在的存储节点，以及，所述从副本所在的存储节点；所述多个存储节点包括：存储所述目标数据的存储节点；所述存储所述目标数据的存储节点用于：若所述存储所述目标数据的存储节点是所述从副本所在的存储节点，将所述目标数据对应的主副本所在的存储节点的标识信息携带在所述第一查询响应消息中；所述客户端601进一步用于：从所述第一查询响应消息中，获取所述主副本所在的存储节点的标识信息，基于所述主副本所在的存储节点的标识信息，向所述主副本所在的存储节点发送第二查询请求消息，所述第二查询请求消息用于触发所述主副本所在的存储节点产生第二查询响应消息，所述第二查询响应消息中包含所述目标数据对应的所有副本所在的存储节点的标识信息；从所述主副本所在的存储节点发送的所述第二查询响应消息中，获取所述所有副本所在的存储节点的标识信息，作为所述目标存储节点的标识信息。
125.本实施例中，若查询到从副本所在的存储节点，客户端还向主副本所在的存储节点查询目标存储节点的标识信息，可以保证获取到最新的标识信息，保证标识信息的准确度，进而提高读写操作的准确性。
126.图7是根据本公开第四实施例的示意图，本实施例提供一种数据读写装置，该装置700包括：确定模块701、查询模块702和读写模块703。
127.确定模块701用于响应于针对目标数据的读写请求消息，确定所述目标数据所属的存储池内的多个存储节点，所述多个存储节点包括所述目标数据所在的目标存储节点，且，所述多个存储节点中的至少一个存储节点内存储所述目标存储节点的标识信息；查询模块702用于查询所述多个存储节点，以获取所述目标存储节点的标识信息；读写模块703用于基于所述目标存储节点的标识信息，将所述读写请求消息发送至所述目标存储节点，以对所述目标存储节点内的所述目标数据进行读写操作。
128.本实施例中，通过查询存储节点，以获取目标存储节点的标识信息，可以在元服务器不可用时依然可以获取到目标存储节点的标识信息，进而可以基于目标存储节点的标识信息将读写请求消息发送至目标存储节点，以对目标存储节点内的目标数据进行读写操作，提高读写操作的可用性。
129.一些实施例中，所述方法应用于分布式存储系统的客户端；所述分布式存储系统还包括：元数据服务器，所述元数据服务器内记录存储池与存储池内的多个存储节点之间的映射关系；所述装置还包括：获取模块，用于基于预设周期，从所述元数据服务器获取所述映射关系；所述确定模块701进一步用于：若所述客户端本地未缓存所述目标存储节点的
标识信息，且，从所述元数据服务器未获取所述目标存储节点的标识信息，基于所述映射关系，确定所述目标数据所属的存储池内的多个存储节点。
130.本实施例中，通过基于预设周期从元数据服务器获取上述的映射关系，可以保证映射关系的准确度，提高读写操作的可靠性。
131.一些实施例中，所述查询模块702进一步用于：依次向所述多个存储节点中的单个存储节点发送第一查询请求消息，所述第一查询请求消息用于查询所述单个存储节点内是否存储所述目标数据，直至接收到第一查询响应消息，所述第一查询响应消息用于表明存储所述目标数据；基于所述第一查询响应消息，获取所述目标存储节点的标识信息。
132.本实施例中，通过依次向单个存储节点发送第一查询请求消息，直至接收到用于表明存储所述目标数据的第一查询响应消息，可以基于所述用于表明存储所述目标数据的第一查询响应消息，获取目标存储节点的标识信息，进而可以基于目标存储节点的标识信息对目标数据进行读写操作，保证读写操作的正常执行。
133.一些实施例中，所述目标数据存在多个副本，所述多个副本包括：主副本和从副本；所述目标存储节点包括：所述主副本所在的存储节点，以及，所述从副本所在的存储节点；所述查询模块702进一步用于：针对产生所述第一查询响应消息的存储节点是所述主副本所在的存储节点，所述第一查询响应消息中包含所述目标存储节点的标识信息，执行：从所述第一查询响应消息中获取所述目标存储节点的标识信息。
134.本实施例中，若查询到主副本所在的存储节点，主副本所在的存储节点可以将所有副本所在的存储节点的标识信息反馈给客户端，保证标识信息的准确度和获取效率，进而提高读写操作的准确性和效率。
135.一些实施例中，所述目标数据存在多个副本，所述多个副本包括：主副本和从副本；所述目标存储节点包括：所述主副本所在的存储节点，以及，所述从副本所在的存储节点；所述查询模块702进一步用于：针对产生所述第一查询响应消息的存储节点是所述从副本所在的存储节点，所述第一查询响应消息中获取所述主副本所在的存储节点的标识信息，执行：基于所述主副本所在的存储节点的标识信息，向所述主副本所在的存储节点发送第二查询请求消息，所述第二查询请求消息用于查询所述主副本所在的存储节点内存储的目标存储节点的标识信息；接收所述主副本所在的存储节点发送的第二查询响应消息，所述第二查询响应消息中包含所述目标存储节点的标识信息；从所述第二查询响应消息中，获取所述目标存储节点的标识信息。
136.本实施例中，若查询到从副本所在的存储节点，客户端还向主副本所在的存储节点查询目标存储节点的标识信息，可以保证获取到最新的标识信息，保证标识信息的准确度，进而提高读写操作的准确性。
137.可以理解的是，本公开实施例中，不同实施例中的相同或相似内容可以相互参考。
138.可以理解的是，本公开实施例中的“第一”、“第二”等只是用于区分，不表示重要程度高低、时序先后等。
139.本公开的技术方案中，所涉及的用户个人信息的收集、存储、使用、加工、传输、提供和公开等处理，均符合相关法律法规的规定，且不违背公序良俗。
140.根据本公开的实施例，本公开还提供了一种电子设备、一种可读存储介质和一种计算机程序产品。
141.图8示出了可以用来实施本公开的实施例的示例电子设备800的示意性框图。电子设备旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备800还可以表示各种形式的移动装置，诸如，个人数字助理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本公开的实现。
142.如图8所示，电子设备800包括计算单元801，其可以根据存储在只读存储器(rom)802中的计算机程序或者从存储单元808加载到随机访问存储器(ram)803中的计算机程序，来执行各种适当的动作和处理。在ram 803中，还可存储电子设备800操作所需的各种程序和数据。计算单元801、rom 802以及ram 803通过总线804彼此相连。输入/输出(i/o)接口805也连接至总线804。
143.电子设备800中的多个部件连接至i/o接口805，包括：输入单元806，例如键盘、鼠标等；输出单元807，例如各种类型的显示器、扬声器等；存储单元808，例如磁盘、光盘等；以及通信单元809，例如网卡、调制解调器、无线通信收发机等。通信单元809允许电子设备800通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
144.计算单元801可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元801的一些示例包括但不限于中央处理单元(cpu)、图形处理单元(gpu)、各种专用的人工智能(ai)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(dsp)、以及任何适当的处理器、控制器、微控制器等。计算单元801执行上文所描述的各个方法和处理，例如数据读写方法。例如，在一些实施例中，数据读写方法可被实现为计算机软件程序，其被有形地包含于机器可读介质，例如存储单元808。在一些实施例中，计算机程序的部分或者全部可以经由rom 802和/或通信单元809而被载入和/或安装到电子设备800上。当计算机程序加载到ram 803并由计算单元801执行时，可以执行上文描述的数据读写方法的一个或多个步骤。备选地，在其他实施例中，计算单元801可以通过其他任何适当的方式(例如，借助于固件)而被配置为执行数据读写方法。
145.本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、现场可编程门阵列(fpga)、专用集成电路(asic)、专用标准产品(assp)、芯片上系统(soc)、复杂可编程逻辑设备(cpld)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
146.用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程负载均衡装置的处理器或控制器，使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
147.在本公开的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供
指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦除可编程只读存储器(eprom或快闪存储器)、光纤、便捷式紧凑盘只读存储器(cd-rom)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
148.为了提供与用户的交互，可以在计算机上实施此处描述的系统和技术，该计算机具有：用于向用户显示信息的显示装置(例如，crt(阴极射线管)或者lcd(液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
149.可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据服务器)、或者包括中间件部件的计算系统(例如，应用服务器)、或者包括前端部件的计算系统(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：局域网(lan)、广域网(wan)和互联网。
150.计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器，又称为云计算服务器或云主机，是云计算服务体系中的一项主机产品，以解决了传统物理主机与vps服务("virtual private server"，或简称"vps")中，存在的管理难度大，业务扩展性弱的缺陷。服务器也可以为分布式系统的服务器，或者是结合了区块链的服务器。
151.应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本发公开中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本公开公开的技术方案所期望的结果，本文在此不进行限制。
152.上述具体实施方式，并不构成对本公开保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本公开的精神和原则之内所作的修改、等同替换和改进等，均应包含在本公开保护范围之内。