专栏名称: 赛尔实验室
哈尔滨工业大学社会计算与信息检索研究中心
今天看啥  ›  专栏  ›  赛尔实验室

赛尔原创@IJCAI 2024 | 教学视频理解新范式-大纲引导,哈工大提出教学视频数据集GUIDE

赛尔实验室  · 公众号  · 程序员  · 2024-07-24 12:00

文章预览

论文名称: GUIDE: A Guideline-Guided Dataset for Instructional Video Comprehension 论文作者:梁家锋、蒋世鑫、汪泽堃、潘浩杰、陈则睿、初征、刘铭、付瑞吉、王仲远、秦兵 论文链接: https://arxiv.org/abs/2406.18227 项目主页:https://guide-ijcai2024.github.io 转载须标注出处:哈工大SCIR 摘要 教学视频指导学习者如何完成多步骤任务,例如烹饪、化妆和刺绣、修理或制作新物品。如图1所示,目前的教学视频数据集大多关注于细粒度标注,缺乏系统性,导致初学者难以学习。在现实生活中,从属相同任务的教学视频之间大多存在很高的流程相似度,因此该工作提出了GUIDE(指南引导)数据集,在现有视频维度之上提出 教学任务维度 上的大纲步骤。数据集包含日常生活相关的8个领域中560个教学任务的3.5K条视频。此外,该工作提出了三个任务(Step Captioning,Guideline Summarization ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览