神器三-能直接看懂视频的搜索系统

呵呵,神器是夸张。确切的名字应该叫基于语义推理的视频检索系统。简单地说,传统的视频检索是需要有人事先对视频的内容进行文字标注的,然后系统使用文本匹配的方法根据你的检索条件去找可以匹配上的标签。但是用户经常很懒也不专业,他们标注出的标签是不靠谱或者不全面的。甚至,有的时候根本就没有标签。这个时候怎么检索视频呢?我们的这个研究方向就是要解决这样的问题。我们使用机器学习和数据挖掘相结合的方法让计算机自己去理解视频里面的基本内容,然后根据简单的推理来确认一个视频是否你要的东西。有兴趣的同学可以下载这个更加详细的英文Demo,同时可以参考我们的论文获得更多的细节。

[1] Xiao-Yong Wei, Yu-Gang Jiang, Chong-Wah Ngo, “Concept-Driven Multi-Modality Fusion for Video Search”, IEEE Transactions on Circuits and Systems for Video Technology, vol. 21, no. 1, pp. 62-73, 2011
[2] Xiao-Yong Wei, Chong-Wah Ngo, Yu-Gang Jiang, “Selection of Concept Detectors for Video Search by Ontology-Enriched Semantic Spaces”, IEEE Transaction on Multimedia, vol. 10, no. 6, 2008

详细Demo戳此 下载 (获2009ACM香港分部SRC-Day最佳演示奖)

视频演示