英文:Video Captioning 分类:multimodal
为视频生成自然语言描述/摘要的任务,要求理解帧间时序、动作与事件演化,比图像描述更具挑战。
技术:时空特征(3D CNN/视频 Transformer)+语言模型、多帧采样与注意力、视频大模型(直接输入视频生成描述);难点:长视频信息压缩、事件边界、因果链;评测:MSVD、MSR-VTT、ActivityNet。
用于视频检索(内容理解索引)、监控摘要、短视频自动标题与无障碍辅助;视频描述是"看视频写文章"的底层能力。
返回AI百科目录 · AI最前沿首页
相关词条:扩散模型 · 视觉编码器 · 语音合成 · 指代表达理解 · 视频编辑
热门栏目: 24小时快讯 · 深度文章 · AI百科 · AI工具库 · AI教程 · 行业大会 · 公司动态