中国科学技术大学杨勋博士 -- 因果启发的视频片段检索
发布人: | 发布日期:2022年04月12日 12:41 | 点击数:
讲座时间:2022年4月15日15时20分
讲座地点:线下工B315,线上腾讯会议
讲座对象:2138cn太阳集团古天乐全体师生
讲座摘要:
近年来,基于深度学习的视频片段检索方法取得了较高的性能,然而实验发现当前的方法依赖于利用数据偏见而不是真正的视觉内容特征,导致模型泛化能力较低,预测结果不可信。针对此问题,本报告将介绍一种因果启发的视频片段检索方法,该方法从因果分析的角度揭示了视频片段特征中所耦合的时序位置信息是一种混杂因子,提出将视频片段特征解耦和因果干预技术相结合,设计一种基于后门调整策略的去混杂跨模态匹配方法,可有效地消除混杂因子所导 致的严重数据伪相关。该算法在保证片段检索准确度的同时,可显著提升模型在分布外测试集上的泛化能力。