基于深度视觉语义嵌入的视频缩略图推荐 |
| |
引用本文: | 张梦琴,孟权令,张维刚.基于深度视觉语义嵌入的视频缩略图推荐[J].北京航空航天大学学报,2019,45(12):2479-2486. |
| |
作者姓名: | 张梦琴 孟权令 张维刚 |
| |
作者单位: | 哈尔滨工业大学(威海)计算机科学与技术学院,威海,264209 |
| |
基金项目: | 国家自然科学基金61672497山东省自然科学基金ZR2017MF001 |
| |
摘 要: | 视频缩略图作为视频内容最直观的表现形式,在视频共享网站中发挥很重要的作用,是吸引用户是否会点击观看该视频的关键要素之一。一句与视频内容相关的描述性语句,再搭配一幅与语句内容相关的视频缩略图,往往对用户更有吸引力,因此提出一种深度视觉语义嵌入模型来构建完整的视频缩略图推荐框架。该模型首先使用卷积神经网络(CNN)来提取视频关键帧的视觉特征,并使用循环神经网络(RNN)来提取描述语句的语义特征,再将视觉特征与语义特征嵌入到维度相同的视觉语义潜在空间;然后通过比较视觉特征与语义特征之间的相关性来推荐与特定的描述语句内容密切相关的视频关键帧作为视频缩略图推荐结果。在不同类型的网络视频数据上的实验表明,所提方法能够有效地从网络视频中推荐出与给定描述性语句内容较相关的视频缩略图序列,提升视频的用户浏览体验。
|
关 键 词: | 视频缩略图 关键帧 卷积神经网络(CNN) 循环神经网络(RNN) 视觉语义嵌入 |
收稿时间: | 2019-07-26 |
Video thumbnail recommendation based on deep visual-semantic embedding |
| |
Institution: | School of Computer Science and Technology, Harbin Institute of Technology, Weihai 264209, China |
| |
Abstract: | |
| |
Keywords: | |
本文献已被 CNKI 万方数据 等数据库收录! |
| 点击此处可从《北京航空航天大学学报》浏览原始摘要信息 |
| 点击此处可从《北京航空航天大学学报》下载免费的PDF全文 |