徐常胜
- 作品数:186 被引量:202H指数:6
- 供职机构:中国科学院自动化研究所更多>>
- 发文基金:国家自然科学基金北京市自然科学基金国家重点实验室开放基金更多>>
- 相关领域:自动化与计算机技术文化科学医药卫生航空宇航科学技术更多>>
- 基于文本的自动视频摘要
- 本文提出了一种基于剧本分析的电影(电视剧)视频摘要的方法.首先利用动态时序匹配算法将剧本与字幕匹配,从而得到有时间标记的视频文本描述以及相应的语义结构;然后,通过对剧本内容的分析,从相关程度、冲突程度、特异程度三方面来衡...
- 赵洋洋徐常胜梁超
- 关键词:文本分析语义识别
- 问题加注标签方法、装置、电子设备和存储介质
- 本发明提供一种问题加注标签方法、装置、电子设备和存储介质,其中方法包括:获取目标问题和标签集合,标签集合内包含多个候选标签;对目标问题和各候选标签分别进行特征提取,得到目标问题的问题语义特征和各候选标签的标签语义特征;基...
- 徐常胜许诺佳钱胜胜方全胡骏
- 多媒体社会事件分析综述被引量:3
- 2021年
- 由于网络技术的飞速发展,自媒体、微博、论坛等基于互联网的多种交流渠道日渐完善,人们能够方便地在线生成和共享丰富的社会多媒体内容。社会事件数据具有跨平台、多模态、大规模、噪声大等特点,基于多媒体社会事件的分析研究非常具有挑战性。因此,如何对社会媒体数据进行处理,研究社会事件分析方法、设计有效的社会事件分析模型成为社会事件分析研究的关键问题。文中对近年来多媒体社会事件分析的相关研究展开了综述,重点回顾了多媒体社会事件表示方法及其在虚假新闻检测、多媒体热点事件检测跟踪及演化分析、社交媒体危机事件响应等领域的应用,并对不同应用涉及的数据集进行了详细介绍。最后对多媒体社会事件分析方面未来可能的研究课题进行了展望。
- 钱胜胜张天柱徐常胜
- 关键词:多媒体社会事件多模态
- 关于单目标跟踪方法的研究综述被引量:5
- 2019年
- 目标跟踪一直都是机器视觉领域的研究热点,应用场景主要分为单目标跟踪和多目标跟踪.本文主要介绍了单目标跟踪问题,回顾了近年来用于视频单目标跟踪的算法,对单目标跟踪方法进行了分类,并且对每一类中具有代表性的方法进行了介绍,分析了各自的优缺点.最后讨论了单目标跟踪任务中的难点问题和发展趋势,为该方向的研究人员快速了解单目标跟踪技术提供了参考.
- 傅杰徐常胜
- 关键词:计算机视觉单目标跟踪
- 视频动态推荐装置
- 本发明涉及社交媒体的视频挖掘和分析技术领域,具体提供了一种视频动态推荐装置,旨在解决如何准确地刻画用户的动态兴趣和视频推荐。为此目的,本发明中的视频动态推荐装置包括视频推荐模型,其可以依据一个或多个历史时刻的视频信息,获...
- 徐常胜张天柱高君宇
- 开放域社会事件分类方法、装置、电子设备和存储介质
- 本发明提供一种开放域社会事件分类方法、装置、电子设备和存储介质,涉及人工智能技术领域,所述方法包括:获取社会事件目标数据;将社会事件目标数据输入开放域社会事件分类模型,输出社会事件目标数据对应的分类类别;其中,分类类别是...
- 钱胜胜徐常胜薛迪展
- 一种基于角色的电视剧视频分析方法
- 本发明公开了一种基于角色的电视剧视频分析,通过人名与人脸的对应关系来关联剧本与视频,使得语义的场景结构能够准确的由剧本映射到视频中。首先,从剧本和视频中分别提取人名与人脸直方图表示,然后利用一种生成式模型对电视剧的拍摄过...
- 徐常胜卢汉清梁超
- 基于对偶变分多模态注意力网络的不完备社会事件分类方法
- 2022年
- 互联网的快速发展和社交媒体规模的不断扩大,带来丰富的社会事件资讯,社会事件分类任务越来越具有挑战性。充分利用图像级和文本级信息是社会事件分类的关键所在。然而,现存的方法大多存在以下局限性:1)现有的多模态方法大多都有一个理想的假设,即每种模态的样本都是充分和完整的,但在实际生活应用中这个假设并不总是成立,会存在事件某个模态缺失的情况;2)大部分方法只是简单地将社会事件的图像特征和文本特征串联起来,以此得到多模态特征来对社会事件进行分类,忽视了模态之间的语义鸿沟。为了应对这些挑战,提出了一种能同时处理完备与不完备社会事件分类的对偶变分多模态注意力网络(DVMAN)。在DVMAN网络中,提出了一个新颖的对偶变分自编码器网络来生成社会事件的公共表示,并进一步重构不完备社会事件学习中缺失的模态信息。通过分布对齐和交叉重构对齐,对图像和文本潜在表示进行双重对齐,以减小不同模态之间的差距,并对缺失的模态信息进行重构,合成其潜在表示。除此之外,设计了一个多模态融合模块对社会事件的图像和文本细粒度信息进行整合,以此实现模态之间信息的互补和增强。在两个公开的事件数据集上进行了大量的实验,与现有先进方法相比,DVMAN的准确率提升了4%以上,证明了所提方法对于社会事件分类的优越性能。
- 周旭钱胜胜李章明方全徐常胜
- 关键词:多模态社交媒体
- 深度相对度量学习的视觉跟踪被引量:8
- 2018年
- 传统的基于检测的跟踪方法虽然具有较好的鲁棒性,但是这种直接将目标与背景简单分类的方式不能合理地考虑跟踪目标与背景的结构相对关系,而这种相对结构判别性信息的缺乏使得跟踪算法极易发生跟踪漂移,为了缓解这种问题,本文提出了一个基于深度相对度量学习的视觉跟踪方法.利用一个对称且权值共享的深度卷积神经网络构建深度相对度量学习模型,通过这个模型来挖掘跟踪目标在大尺度的图像块里的结构相对关系,然后在Bayes跟踪框架下利用这种相对度量最大值确定跟踪目标,整个跟踪算法简洁有效.通过在跟踪的基准视频序列库上的实验结果验证了本文算法在跟踪精度和跟踪成功率上的高性能.
- 郭文游思思高君宇高君宇杨小汕张天柱
- 关键词:卷积神经网络视觉跟踪
- 消除后门攻击的防御方法、装置、电子设备和存储介质
- 本发明涉及人工智能技术领域,提供一种消除后门攻击的防御方法、装置、电子设备和存储介质,其中方法包括:基于图像数据集中各图像的语义特征,确定聚类模型;通过多个随机蒙版,对各图像进行掩码处理,得到降级图像,通过聚类模型对降级...
- 钱胜胜徐常胜王一飞薛迪展