一种基于稀疏典型性相关分析的图像检索方法

被引：23

作者：

庄凌

庄越挺

吴江琴

叶振超

吴飞

机构：

[1] 浙江大学计算机科学与技术学院

来源：

软件学报 | 2012年 / 23卷 / 05期

关键词：

图像检索; 文本; 语义; 稀疏典型性相关分析; 视觉单词;

D O I：

暂无

中图分类号：

TP391.41 [];

学科分类号：

080203 ;

摘要：

图像语义检索的一个关键问题就是要找到图像底层特征与语义之间的关联,由于文本是表达语义的一种有效手段,因此提出通过研究文本与图像两种模态之间关系来构建反映两者间潜在语义关联的有效模型的思路.基于该模型,可使用自然语言形式(文本语句)来表达检索意图,最终检索到相关图像.该模型基于稀疏典型性相关分析(sparse canonical correlation analysis,简称sparse CCA),按照如下步骤训练得到:首先利用隐语义分析方法构造文本语义空间,然后以视觉词袋(bag of visual words)来表达文本所对应的图像,最后通过Sparse CCA算法找到一个语义相关空间,以实现文本语义与图像视觉单词间的映射.使用稀疏的相关性分析方法可以提高模型可解释性和保证检索结果稳定性.实验结果验证了Sparse CCA方法的有效性,同时也证实了所提出的图像语义检索方法的可行性.

引用

页码：1295 / 1304

页数：10

共 7 条

[1] 互联网跨媒体分析与检索:理论与算法 [J].

吴飞 ;

庄越挺 .

计算机辅助设计与图形学学报, 2010, (01) :1-9

[2] 一种基于内容相关性的跨媒体检索方法 [J].

张鸿 ;

吴飞 ;

庄越挺 ;

陈建勋 .

计算机学报, 2008, (05) :820-826

[3] Sparse canonical correlation analysis [J].

Hardoon, David R. ;

Shawe-Taylor, John .

MACHINE LEARNING, 2011, 83 (03) :331-353

[4] Automatic image annotation using visual content and folksonomies [J].

Lindstaedt, Stefanie ;

Moerzinger, Roland ;

Sorschag, Robert ;

Pammer, Viktoria ;

Thallinger, Georg .

MULTIMEDIA TOOLS AND APPLICATIONS, 2009, 42 (01) :97-113

[5] Semantic interactive image retrieval combining visual and conceptual content description [J].

Marin Ferecatu ;

Nozha Boujemaa ;

Michel Crucianu .

Multimedia Systems, 2008, 13 :309-322

[6]

Image semantics discovery from web pages for semantic-based image retrieval using self-organizing maps[J] . Hsin-Chang Yang,Chung-Hong Lee.Expert Systems With Applications . 2006 (1)

[7] Distinctive image features from scale-invariant keypoints [J].

Lowe, DG .

INTERNATIONAL JOURNAL OF COMPUTER VISION, 2004, 60 (02) :91-110

← 1 →