民航英汉双语无线电通信能力等级自动测评方法及系统与流程

文档序号:21465833发布日期:2020-07-14 16:50阅读:来源:国知局

技术特征:

1.民航英汉双语无线电通信能力等级自动测评方法,其特征在于,包括以下步骤:

s1、获取一套作答试题中每个客观题作答文本,校对每个客观题作答文本与该题参考答案文本是否一致,根据校对结果和对应分值生成该题得分;

s2、获取一套作答试题中每个主观题作答语音,利用民航英汉双语无线电通信语音识别引擎进行处理,得到每个主观题作答语音的语音语调匹配率、语音转换文本及识别文本语法错误个数;

s3、计算每个主观题语音转换文本的单词匹配次数总和与该题参考答案单词总数的比值,得到该题的文本匹配率;单词匹配次数总和与该题参考答案单词总数中数值较大的为分母,数值较小的为分子;其中,每个主观题语音转换文本的单词与该题参考答案的单词进行匹配,每匹配一次,单词匹配次数总和+1;

s4、计算每个主观题语音转换文本的关键词识别值总和与该题参考关键词总数的比值,得到该题的关键词匹配率;其中,该题参考关键词与其主观题语音转换文本进行匹配,重复匹配时,关键词识别值总和仅+1;

s5、计算每个主观题语音转换文本的单词识别值总和与该题参考答案单词总数的比值,得到该题的识别单词比量;其中,每个主观题语音转换文本的单词与该题参考答案的单词进行匹配,重复匹配时,单词识别值总和仅+1;

s6、计算每个主观题语音转换文本的短语识别值总和与该题参考评分要义短语总数的比值,得到该题的评分要义匹配率;其中,该题参考评分要义短语与其主观题语音转换文本进行匹配,重复匹配时,短语识别值总和仅+1;

s7、利用每个主观题的识别文本语法错误个数,计算该题的识别文本语法错误比量;其中,识别文本语法错误个数与识别文本语法错误比量的关系为前者多则后者小,前者少则后者大;

s8、利用步骤s1得到的每个客观题得分进行求和,得到该套试题的客观题总分值,并转换为客观题理解维度的等级成绩;利用语音语调匹配率、文本匹配率、关键词匹配率、识别单词比量、评分要义匹配率及识别文本语法错误比量,计算每个主观题考核维度的主观题单项分值,并将其转换为该题型考核维度的等级分值与等级成绩,其中主观题考核维度包括理解、语音、流利、结构、词汇及互动,不同主观题的考核维度不同;利用各题型考核维度的等级分值计算各题型考核维度的等级分值平均分值,并将其转换为六个维度的等级分值与等级成绩;选取六个维度的最低等级成绩为民航英汉双语无线电通信能力等级成绩;输出各题型考核维度的等级分值与等级成绩、六个维度的等级分值与等级成绩及民航英汉双语无线电通信能力等级成绩。

2.根据权利要求1所述的民航英汉双语无线电通信能力等级自动测评方法,其特征在于,所述理解维度分值=关键词匹配率(%)*x1+评分要义匹配率(%)*u1+识别单词比量(%)*v1;其中,x1为关键词匹配率在理解维度分值中所占的分数,u1为评分要义在理解维度分值中所占的分数,v1为识别单词比量在理解维度分值中所占的分数;

所述语音维度分值=语音语调匹配率(%)*y1+文本匹配率(%)*z1;其中,y1为语音语调匹配率在语音维度分值中所占的分数,z1为文本匹配率在语音维度分值中所占的分数;

所述流利维度分值=关键词匹配率(%)*x2+评分要义匹配率(%)*u2+识别单词比量(%)*v2;其中,x2为关键词匹配率在流利维度分值中所占的分数,u2为评分要义在流利维度分值中所占的分数,v2为识别单词比量在流利维度分值中所占的分数;

所述结构维度分值=关键词匹配率(%)*x3+评分要义匹配率(%)*u3+识别单词比量(%)*v3+识别文本语法错误比量(%)*w1;其中,x3为关键词匹配率在结构维度分值中所占的分数,u2为评分要义在结构维度分值中所占的分数,v3为识别单词比量在结构维度分值中所占的分数,w1为识别文本语法错误比量在结构维度分值中所占的分数;

所述词汇维度分值=关键词匹配率(%)*x4+评分要义匹配率(%)*u4+识别单词比量(%)*v4;其中,x4为关键词匹配率在词汇维度分值中所占的分数,u2为评分要义在词汇维度分值中所占的分数,v4为识别单词比量在词汇维度分值中所占的分数;

所述互动维度分值=关键词匹配率(%)*x5+评分要义匹配率(%)*u5+识别单词比量(%)*v5+识别文本语法错误比量(%)*w2;其中,x5为关键词匹配率在互动维度分值中所占的分数,u2为评分要义在互动维度分值中所占的分数,v5为识别单词比量在互动维度分值中所占的分数。

3.根据权利要求1所述的民航英汉双语无线电通信能力等级自动测评方法,其特征在于,所述步骤s3计算每个主观题的文本匹配率的具体计算步骤如下:

s31、将每个主观题语音转换文本的单词逐个与该题参考答案的单词进行匹配;

s32、若匹配到该单词,则单词匹配次数总和+1;其中,匹配单词时不考虑其顺序,仅考虑其是否出现以及出现的次数;

s33、按以下步骤计算每个主观题的文本匹配率:计算每个主观题语音转换文本的单词匹配次数总和与该题参考答案单词总数的比值,得到该题的文本匹配率;单词匹配次数总和与该题参考答案单词总数中数值较大的为分母,数值较小的为分子。

4.根据权利要求1所述的民航英汉双语无线电通信能力等级自动测评方法,其特征在于,所述步骤s4计算每个主观题的关键词匹配率的具体计算步骤如下:

s41、将每个主观题的参考关键词逐个与该题语音转换文本进行匹配;

s42、若匹配到该参考关键词,则关键词识别值总和+1;如果该参考关键词重复匹配时,关键词识别值总和不增加;其中,匹配参考关键词时不考虑其顺序,仅考虑其是否出现;

s43、按以下公式计算每个主观题的关键词匹配率:关键词匹配率=关键词识别值总和/参考关键词总数*100%。

5.根据权利要求1所述的民航英汉双语无线电通信能力等级自动测评方法,其特征在于,所述步骤s5计算每个主观题的识别单词比量的具体计算步骤如下:

s51、每个主观题语音转换文本的单词逐个与该题参考答案的单词进行匹配;

s52、若匹配到该单词,则单词识别值总和+1;如果该单词重复匹配时,单词识别值总和不增加;其中,匹配单词时不考虑其顺序,仅考虑其是否出现;

s53、按以下公式计算每个主观题的识别单词比量:识别单词比量=单词识别值总和/参考答案单词总数*100%。

6.根据权利要求1所述的民航英汉双语无线电通信能力等级自动测评方法,其特征在于,所述步骤s6计算每个主观题的评分要义匹配率的具体计算步骤如下:

s61、将每个主观题的参考评分要义短语逐个与该题语音转换文本进行匹配;

s62、若匹配到该参考评分要义短语,则短语识别值总和+1;如果该参考评分要义短语重复匹配时,短语识别值总和不增加;其中,匹配参考评分要义短语时不考虑其顺序,仅考虑其是否出现;

s63、按以下公式计算每个主观题的评分要义匹配率:评分要义匹配率=短语识别值总和/参考评分要义短语总数*100%。

7.根据权利要求1所述的民航英汉双语无线电通信能力等级自动测评方法,其特征在于,所述步骤s7中每个主观题的识别文本语法错误个数与其识别文本语法错误比量之间的关系为:

当识别文本语法错误个数大于10个时,识别文本语法错误比量为10%;

当识别文本语法错误个数为10个时,识别文本语法错误比量为20%;

当识别文本语法错误个数为9个时,识别文本语法错误比量为30%;

当识别文本语法错误个数为8个时,识别文本语法错误比量为45%;

当识别文本语法错误个数为7个时,识别文本语法错误比量为60%;

当识别文本语法错误个数为5~6个时,识别文本语法错误比量为75%;

当识别文本语法错误个数为2~4个时,识别文本语法错误比量为85%;

当识别文本语法错误个数小于2个时,识别文本语法错误比量为95%。

8.根据权利要求1所述的民航英汉双语无线电通信能力等级自动测评方法,其特征在于,所述步骤s8在得到各题的分值后,建立分值与等级成绩信息,分别换算成客观题单项分值与主观题单项分值,然后转化为等级分值,再转化为等级成绩;其中:

所述客观题单项分值转换为等级分值信息时,采用n表示每个小题的百分制分数,若n<4,则等级分值为1;若4≤n<8,则等级分值为2;若8≤n<12,则等级分值为3;若12≤n<14,则等级分值为4;若14≤n<20,则等级分值为5;若20≤n<24,则等级分值为6;若24≤n<26,则等级分值为7;若26≤n≤30,则等级分值为8;

所述主观题单项分值转换为等级分值信息时,采用m表示每个小题的百分制分数,若0≤m<10,则等级分值为1;若10≤m<20,则等级分值为2;若20≤m<30,则等级分值为3;若30≤m<50,则等级分值为4;若50≤m<70,则等级分值为5;若70≤m<80,则等级分值为6;若80≤m<90,则等级分值为7;若90≤m≤100,则等级分值为8;

所述等级分值平均分值转换为等级成绩信息时,采用c表示等级分值平均分值,若c<2,则等级成绩为1;若2≤c<3,则等级成绩为2;若3≤c<4,则等级成绩为3-;若4≤c<5,则等级成绩为3+;若5≤c<6,则等级成绩为4-;若6≤c<7,则等级成绩为4+;若7≤c<8,则等级分值为5-,若c=8,则等级成绩为5+;

所述等级成绩转换为等级分值信息时,若等级成绩为1,则等级分值为1;若等级成绩为2,则等级分值为2;若等级成绩为3-,则等级分值为3;若等级成绩为3+,则等级分值为4;若等级成绩为4-,则等级分值为5;若等级成绩为4+,则等级分值为6;若等级成绩为5-,则等级分值为7;若等级成绩为5+,则等级分值为8。

9.根据权利要求1~8所述的民航英汉双语无线电通信能力等级自动测评方法,其特征在于,所述步骤s1和步骤s8适用的客观题为选择题,选择题包括至少一个小题;所述步骤s2~步骤s8适用的主观题题型包括简答题、故事复述题、模拟通话题及opi面试题,每种题型至少包括一个小题;其中:

所述客观题从理解一个维度计算等级分值;

所述问答题从理解、结构及词汇共三个维度计算等级分值;

所述故事复述题和模拟通话题均从理解、语音、流利、结构及词汇共五个维度计算等级分值;

所述opi面试题从理解、语音、流利、结构、词汇及互动共六个维度计算等级分值。

10.实现权利要求1~9中任意一项所述的民航英汉双语无线电通信能力等级自动测评系统,其特征在于,包括客观题评分单元、主观题评分单元、语音识别单元、测评管控单元及测评信息库共五个单元,所述主观题评分单元包括文本匹配率计算模块、关键词匹配率计算模块、识别单词比量计算模块、评分要义匹配率计算模块及识别文本语法错误比量计算模块共五个计算模块;其中:

测评信息库,用于存储各题的参考答案、参考关键词、参考评分要义、答案分值对应信息、分值与等级成绩信息、识别文本语法错误个数与识别文本语法错误比量对应关系,以及客观题评分单元、主观题评分单元、测评管控单元输出的评分结果和等级;

客观题评分单元,用于获取一套作答试题中每个客观题作答答案文本,调用测评信息库中该题参考答案文本进行校对,并调用测评信息库中该题的答案分值对应信息,生成该题得分,然后输出至测评管控单元和测评信息库;

语音识别单元,基于民航英汉双语无线电通信语音识别引擎实现,用于获取一套作答试题中每个主观题作答语音并处理,输出该题作答语音的语音语调匹配率、语音转换文本及识别文本语法错误个数;

文本匹配率计算模块,计算经语音识别单元生成的每个主观题语音转换文本中的单词匹配次数总和与该题参考答案单词总数的比值,得到该题的文本匹配率,并输出至测评管控单元和测评信息库;

关键词匹配率计算模块,计算经语音识别单元生成的每个主观题语音转换文本中的关键词识别值总和与该题参考关键词总数的比值,得到该题的关键词匹配率,并输出至测评管控单元和测评信息库;

识别单词比量计算模块,计算经语音识别单元生成的每个主观题语音转换文本中的单词识别值总和与该题参考答案单词总数的比值,得到该题的识别单词比量,并输出至测评管控单元和测评信息库;

评分要义匹配率计算模块,计算经语音识别单元生成的每个主观题小题语音转换文本中的短语识别值总和与该题参考评分要义短语总数的比值,得到该题的评分要义匹配率,并输出至测评管控单元和测评信息库;

识别文本语法错误比量计算模块,获取经语音识别单元生成的每个主观题识别文本语法错误个数,调用测评信息库中识别文本语法错误个数与识别文本语法错误比量对应关系进行校对,得到该题识别文本语法错误比量,并输出至测评管控单元和测评信息库;其中,识别文本语法错误个数与识别文本语法错误比量对应关系中,识别文本语法错误个数与识别文本语法错误比量的关系为前者多则后者小,前者少则后者大;

测评管控单元,获取客观题评分单元得到的每个客观题得分,求和得到该套试题的客观题总分值,并结合测评信息库的分值与等级成绩信息转换为客观题理解维度的等级成绩;利用语音语调匹配率、文本匹配率、关键词匹配率、识别单词比量、评分要义匹配率及识别文本语法错误比量,计算每个主观题考核维度的主观题单项分值,并将其转换为该题型考核维度的等级分值与等级成绩,其中主观题考核维度包括理解、语音、流利、结构、词汇及互动,不同主观题的考核维度不同;利用各题型考核维度的等级分值计算各题型考核维度的等级分值平均分值,并将其转换为六个维度的等级分值与等级成绩;选取六个维度的最低等级成绩为民航英汉双语无线电通信能力等级成绩;输出各题型考核维度的等级分值与等级成绩、六个维度的等级分值与等级成绩及民航英汉双语无线电通信能力等级成绩。


技术总结
本发明公开了民航英汉双语无线电通信能力等级自动测评方法及系统,包括以下步骤:S1、生成每个客观题得分;S2、得到每个主观题作答语音的语音语调匹配率、语音转换文本及识别文本语法错误个数;S3、计算文本匹配率;S4、计算关键词匹配率;S5、计算识别单词比量;S6、计算评分要义匹配率;S7、计算识别文本语法错误比量;S8、根据得到的客观题总分值转换为客观题理解维度的单项分值与等级成绩;根据不同主观题的主观题单项分值,计算各题型考核维度的等级分值与等级成绩、六个维度的等级分值与等级成绩及民航英汉双语无线电通信能力等级成绩。本发明能确切、真实、全面、高效地测评使用英汉双语进行无线电通信的民航从业人员的汉语和英语水平。

技术研发人员:张华勇;王小刚;张彦刚
受保护的技术使用者:成都爱维译科技有限公司
技术研发日:2020.04.16
技术公布日:2020.07.14
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1