1.一种用于零样本分类的多模态典型相关分析的方法,其特征在于,包括如下步骤:
1)使用训练数据的视觉特征X1以及相应类别的语义特征X2,…Xc求解下式,得到映射矩阵W:
式中,I是单位矩阵;
2)在验证集中学习得到下式中的权重αi
式中,xj是验证数据的视觉特征,是与xj相对应类别的第k个模态的语义特征,sim(a,b)=aTb/(||a||·||b||),为两个向量的距离;
3)使用映射矩阵W,将测试数据的视觉特征和未见过的类别的语义特征yk映射至公共空间;
4)用步骤2)中的公式对测试数据进行分类,式中的k*是测试数据相应的类别。