图约束的半监督对抗跨模态检索方法研究 |
| |
引用本文: | 宣瑞晟,欧卫华,宋浩强,张仁津.图约束的半监督对抗跨模态检索方法研究[J].贵州师范大学学报(自然科学版),2019,37(4):86-94. |
| |
作者姓名: | 宣瑞晟 欧卫华 宋浩强 张仁津 |
| |
作者单位: | 贵州师范大学大数据与计算机科学学院,贵州贵阳,550025;贵州师范大学大数据与计算机科学学院,贵州贵阳,550025;贵州师范大学大数据与计算机科学学院,贵州贵阳,550025;贵州师范大学大数据与计算机科学学院,贵州贵阳,550025 |
| |
基金项目: | 国家自然科学基金;贵州省自然科学基金;博士启动基金 |
| |
摘 要: | 跨模态检索是指给定一种模态的查询词,返回与之语义相关的其他模态关联词的一种检索方法。现有工作主要集中监督式跨模态检索方法研究,而实际应用中样本标签少,样本标签获取成本高。为此,提出一种图约束的半监督对抗跨模态检索方法(SS-ACMR)。该方法通过对无标签样本建立图作为约束条件来学习公共子空间表示。具体而言,在对抗学习框架下:1)对无标签样本,根据样本之间欧式距离构建图,希望相似样本的公共子空间表示是相似的; 2)对有标签样本使用传统的对抗跨模态检索方法进行学习; 3)无标签样本和有标签样本在对抗学习框架下共同学习公共子空间的表示。Wikipedia数据集和NUSWIDE-10k数据集上的实验结果表明:本文的方法得到了和现有监督跨模态检索方法相当的检索结果,远好于现有半监督跨模态检索方法。
|
关 键 词: | 跨模态检索 对抗学习 半监督 图约束 公共子空间 |
Research on semi-supervised adversarial cross-modal retrieval method with graph constraints |
| |
Abstract: | |
| |
Keywords: | |
本文献已被 CNKI 万方数据 等数据库收录! |
|