存算分离方法、系统、设备及介质与流程

文档序号:34065354发布日期:2023-05-06 14:54阅读:来源:国知局

技术特征:

1.一种存算分离方法,其特征在于,应用于存储节点中部署的大数据存储服务,包括:

2.根据权利要求1所述的存算分离方法,其特征在于,所述将解析后的文件请求发送至分布式文件系统,包括:

3.根据权利要求1所述的存算分离方法,其特征在于,所述将解析后的文件请求发送至分布式文件系统,包括:

4.根据权利要求3所述的存算分离方法,其特征在于,所述对所述解析后的文件请求中的位置块关键字段进行重定义,包括:

5.根据权利要求1所述的存算分离方法,其特征在于,所述获取原生hdfs客户端发送的文件请求之前,还包括:

6.根据权利要求5所述的存算分离方法,其特征在于,所述与所述原生hdfs客户端建立链接之后,还包括:

7.根据权利要求6所述存算分离方法,其特征在于,还包括:

8.根据权利要求6所述的存算分离方法,其特征在于,所述向所述原生hdfs客户端返回本节点的ip信息,包括:

9.根据权利要求5所述的存算分离方法,其特征在于,所述基于hdfs原生协议处理所述建链请求,包括:

10.根据权利要求1所述的存算分离方法,其特征在于,所述基于hdfs原生协议解析所述文件请求,包括:

11.根据权利要求5所述的存算分离方法,其特征在于,还包括:

12.根据权利要求5所述的存算分离方法,其特征在于,所述获取所述原生hdfs客户端发送的建链请求,包括:

13.一种存算分离方法,其特征在于,应用于分布式大数据存储系统,所述分布式大数据存储系统包括多个存储节点,每个所述存储节点上均部署大数据存储服务,所述方法包括:

14.根据权利要求13所述的存算分离方法,其特征在于,还包括:

15.根据权利要求13所述的存算分离方法,其特征在于,还包括:

16.根据权利要求15所述的存算分离方法,其特征在于,还包括:

17.根据权利要求15所述的存算分离方法,其特征在于,还包括:

18.一种存算分离系统,其特征在于,应用于存储节点中部署的大数据存储服务,包括:

19.一种电子设备,其特征在于,包括存储器和处理器,其中:

20.一种计算机可读存储介质,其特征在于,用于保存计算机程序,其中,所述计算机程序被处理器执行时实现如权利要求1至17任一项所述的存算分离方法。


技术总结
本申请公开了存算分离方法、系统、设备及介质,包括:获取原生HDFS客户端发送的文件请求;所述原生HDFS客户端为计算平台中的HDFS客户端;基于HDFS原生协议解析所述文件请求,并将解析后的文件请求发送至分布式文件系统,以便所述分布式文件系统处理所述文件请求,并返回相应的处理结果;将所述处理结果返回给所述原生HDFS客户端。这样,兼容HDFS原生协议,在大数据存储服务中实现HDFS原生协议进行文件请求处理,替换Hadoop大数据生态中计算平台的本地HDFS,支持存算分离,能够降低部署复杂度,无需在计算平台安装插件,提升系统可维护性。

技术研发人员:王帅阳,肖国栋,李旭东,张在贵
受保护的技术使用者:浪潮电子信息产业股份有限公司
技术研发日:
技术公布日:2024/1/12
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1