一种语句处理的方法和相关装置与流程

文档序号:36164170发布日期:2023-11-23 14:11阅读:67来源:国知局
一种语句处理的方法和相关装置与流程

本申请涉及数据处理领域,特别是涉及一种语句处理的方法和相关装置。


背景技术:

1、随着自然语言处理技术的快速发展,语句相似度计算广泛应用于在问答系统、搜索系统等应用场景中。通常情况下,通过计算两个语句的语句相似度,基于语句相似度确定两个语句是否匹配,以匹配的语句作为问答系统、搜索系统等场景的处理结果。

2、相关技术中,针对目标语句和多个候选语句而言,先通过每个候选语句的词语特征和目标语句的词语特征,计算每个候选语句与目标语句的语句相似度;再基于语句相似度从多个候选语句中确定目标语句匹配的候选语句。

3、然而,实际应用中存在多个候选语句与目标语句均不匹配的情况,在该情况下采用上述方式,无法从多个候选语句中确定目标语句匹配的候选语句,导致无法满足得到目标语句的匹配语句的实际需求,从而导致问答系统、搜索系统等应用场景的处理效果较差。


技术实现思路

1、为了解决上述技术问题,本申请提供了一种语句处理的方法和相关装置,即使在多个第一候选语句与目标语句均不匹配情况下,也能够满足得到目标语句的匹配语句的实际需求,从而提升问答系统、搜索系统等应用场景的处理效果。

2、本申请实施例公开了如下技术方案:

3、一方面,本申请提供一种语句处理的方法,所述方法包括:

4、获取多个第一候选语句分别与目标语句的语句相似度;

5、若基于所述语句相似度确定所述多个第一候选语句与所述目标语句均不匹配,对所述多个第一候选语句进行切分处理获得多个第二候选语句;

6、基于所述第二候选语句对于所述目标语句的重要性参数值,从所述多个第二候选语句中确定多个第一待融合语句;

7、基于所述多个第一待融合语句中各个词语之间的依赖关系,对所述多个第一待融合语句进行融合处理获得所述目标语句匹配的融合语句。

8、另一方面,本申请提供一种语句处理的装置,所述装置包括:获取单元、切分单元、确定单元和融合单元;

9、所述获取单元,用于获取多个第一候选语句分别与目标语句的语句相似度;

10、所述切分单元,用于若基于所述语句相似度确定所述多个第一候选语句与所述目标语句均不匹配,对所述多个第一候选语句进行切分处理获得多个第二候选语句;

11、所述确定单元,用于基于所述第二候选语句对于所述目标语句的重要性参数值,从所述多个第二候选语句中确定多个第一待融合语句;

12、所述融合单元,用于基于所述多个第一待融合语句中各个词语之间的依赖关系,对所述多个第一待融合语句进行融合处理获得所述目标语句匹配的融合语句。

13、另一方面,本申请提供一种用于语句处理的设备,所述设备包括处理器以及存储器:

14、所述存储器用于存储程序代码,并将所述程序代码传输给所述处理器;

15、所述处理器用于根据所述程序代码中的指令执行上述方面所述的语句处理的方法。

16、另一方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质用于存储计算机程序,所述计算机程序被处理器执行时,执行上述方面所述的语句处理的方法。

17、另一方面,本申请实施例提供了一种计算机程序产品,所述计算机程序产品包括计算机程序或指令;当所述计算机程序或指令被处理器执行时,执行上述方面所述的语句处理的方法。

18、由上述技术方案可以看出,针对目标语句和多个第一候选语句而言,计算每个第一候选语句与目标语句的语句相似度;在基于语句相似度确定多个第一候选语句与目标语句均不匹配时,切分多个第一候选语句得到多个第二候选语句;通过每个第二候选语句对于目标语句的重要性参数值,从多个第二候选语句中确定多个第一待融合语句;按照多个第一待融合语句中各个词语之间的依赖关系,融合多个第一待融合语句得到目标语句匹配的融合语句。

19、该方法在基于语句相似度确定多个第一候选语句与目标语句均不匹配情况下,针对多个第一候选语句通过切分处理和重要性确定的方式,得到对于目标语句具有重要性的多个第一待融合语句;并按照各个词语之间的依赖关系,将多个第一待融合语句融合为目标语句匹配的融合语句。基于此,即使在多个第一候选语句与目标语句均不匹配情况下,该方法也能够满足得到目标语句的匹配语句的实际需求,从而提升问答系统、搜索系统等应用场景的处理效果。



技术特征:

1.一种语句处理的方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述基于所述第二候选语句对于所述目标语句的重要性参数值,从所述多个第二候选语句中确定多个第一待融合语句,包括:

3.根据权利要求2所述的方法,其特征在于,所述重要性检测模型的训练步骤,包括:

4.根据权利要求1所述的方法,其特征在于,所述基于所述多个第一待融合语句中各个词语之间的依赖关系,对所述多个第一待融合语句进行融合处理获得所述目标语句匹配的融合语句,包括:

5.根据权利要求4所述的方法,其特征在于,所述基于所述多个第二待融合语句中各个词语之间的依赖关系,对所述多个第二待融合语句进行融合处理获得所述目标语句匹配的融合语句,包括:

6.根据权利要求5所述的方法,其特征在于,所述基于所述设计变量和所述多个第二待融合语句中各个词语之间的依赖关系,构建表示最大化问题的目标函数,包括:

7.根据权利要求1所述的方法,其特征在于,所述对所述多个第一候选语句进行切分处理获得多个第二候选语句,包括:

8.根据权利要求1所述的方法,其特征在于,所述获取多个第一候选语句分别与目标语句的语句相似度,包括:

9.根据权利要求8所述的方法,其特征在于,所述基于所述第一候选语句的第一词语特征、所述第一候选语句的第一语句特征、所述目标语句的第二词语特征和所述目标语句的第二语句特征进行相似度运算,获取所述第一候选语句与所述目标语句的语句相似度,包括:

10.根据权利要求9所述的方法,其特征在于,所述基于所述第一候选语句的句法结构对应的词语,确定所述第一语句特征,包括:

11.根据权利要求8所述的方法,其特征在于,所述基于所述第一候选语句的第一词语特征、所述第一候选语句的第一语句特征、所述目标语句的第二词语特征和所述目标语句的第二语句特征进行相似度运算,获取所述第一候选语句与所述目标语句的语句相似度,包括:

12.一种语句处理的装置,其特征在于,所述装置包括:获取单元、切分单元、确定单元和融合单元;

13.一种计算机设备,其特征在于,所述设备包括处理器以及存储器:

14.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质用于存储计算机程序,所述计算机程序被处理器执行时,执行权利要求1-11中任意一项所述的语句处理的方法。

15.一种计算机程序产品,其特征在于,包括计算机程序或指令;当所述计算机程序或指令被处理器执行时,执行权利要求1-11中任意一项所述的语句处理的方法。


技术总结
本申请实施例公开了一种语句处理的方法和相关装置,应用于人工智能场景或车载场景,针对目标语句和多个第一候选语句而言,计算每个第一候选语句与目标语句的语句相似度;在基于语句相似度确定多个第一候选语句与目标语句均不匹配时,切分多个第一候选语句得到多个第二候选语句;通过每个第二候选语句对于目标语句的重要性参数值,从多个第二候选语句中确定多个第一待融合语句;按照多个第一待融合语句中各个词语之间的依赖关系,融合多个第一待融合语句得到目标语句匹配的融合语句。该方法即使在多个第一候选语句与目标语句均不匹配情况下,也能够满足得到目标语句的匹配语句的实际需求,从而提升问答系统、搜索系统等应用场景的处理效果。

技术研发人员:李涛
受保护的技术使用者:财付通支付科技有限公司
技术研发日:
技术公布日:2024/1/16
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1