林欣
- 作品数：55 被引量：17H指数：2
- 供职机构：华东师范大学更多>>
- 发文基金：上海市科学技术委员会科研基金国家自然科学基金中央高校基本科研业务费专项资金更多>>
- 相关领域：自动化与计算机技术建筑科学更多>>
- 基于双路径多模态交互的一阶段视觉定位模型
- 2024年
- 现有的一阶段方法分别提取视觉特征映射和文本特征,并进行多模态推理来预测被引用对象的边界框.这些方法存在以下两个缺点:首先,预先训练的视觉特征提取器在视觉特征中引入了与文本无关的视觉信号,阻碍了多模态交互;其次,现有模型的推理过程缺乏对语言建模的可视化指导.基于上述缺点,现有的一阶段方法的推理能力是有限的.提出了一种提取文本相关视觉特征映射的低阶交互和一种整合视觉特征的高阶交互来指导语言建模,并进一步对视觉特征进行多步推理.在此基础上,提出了一种新的网络结构,称为双路径多级交互网络.在5种常用的视觉定位数据集上进行了实验,结果表明该方法具有较好的性能和实时性.
- 王月叶加博林欣
- 关键词：视觉定位
- 基于解耦常识性关联的图像描述生成算法
- 2024年
- 基于解耦常识性关联的图像描述生成算法旨在排除各类实体间常识性关联对模型推理的干扰,提高描述生成的流畅性与准确性.针对当前图像描述生成中存在的符合常识但与图像内容不相符的关系语句,该算法先通过一种新颖的训练方式加强关系检测模型对图像中真实关系的关注程度,提高关系推理的准确性.再通过一种关系感知的实体交互方法,对存在关系的实体进行有针对性的信息交互,对关系信息进行强化.实验表明,该算法能够纠正一些常识性的虚假关系,生成较为准确的图像描述,并在各项评价指标上获得了较好的实验结果.
- 刘家伟林欣
- 一种基于Revit的3D模型批量导出方法
- 本发明公开了一种基于Revit的3D模型批量导出方法，其特点是采用Revit模型批量信息提取的方法，将获取每个模型的几何、材质和贴图信息，分别存储在Obj和Mtl文件中构建VR模型库，实现BIM模型中3D模型的批量导出。...
- 林欣孙传翔
- 一种为不确定图的决策查询清洗的数据清洗方法
- 本发明提供了一种为不确定图的决策查询清洗边的方法，通过清洗边，提高查询结果质量。该方法为：定义不确定图的决策查询的数据清洗问题，主要包括以下步骤：步骤一：定义不确定图、可能子图、决策查询、查询结果质量及<Image fi...
- 林欣周慧君
- 文献传递
- 一种单图中近似频繁图挖掘的方法、装置、设备、介质和系统
- 本发明涉及图数据挖掘及图匹配领域，特别涉及一种单图中近似频繁图挖掘的方法，方法包括：根据给定的单图的大小、给定的相似度和给定的频繁程度，计算单图的频繁子图的大小上限；根据频繁子图的大小上限，遍历单图，搜索单图的所有子图；...
- 林欣窦建凯吴永成
- 文献传递
- 文本信息与图结构信息相融合的知识图谱补全
- 2025年
- 提出了一种基于路径查询信息的图注意力模型,可以将知识图谱中的文本信息与图结构信息有效融合,进而提高知识图谱的补全效果.对于文本信息,使用基于预训练语言模型的双编码器来分别获得实体的嵌入表示和路径查询信息的嵌入表示.通过注意力机制来进行路径查询信息的聚合,以捕获图结构信息,更新实体的嵌入表示.模型使用对比学习进行训练,在多个知识图谱数据集上进行实验,如直推式、归纳式的方式,都取得了良好的效果.结果表明,将预训练语言模型与图神经网络的优势相结合,可以有效捕获知识图谱中文本信息与图结构信息,进而提高知识图谱的补全效果.
- 范厚龙房爱莲林欣
- 基于CLIP微调的扩散模型安全化
- 2025年
- 扩散模型变革了文本–图像生成领域,使终端用户可以基于简单的自然语言提示生成高质量、多样化的图像艺术作品.然而,由于训练数据集庞大且未经过滤,文本–图像生成模型具有生成色情内容与暴力内容等不适当内容的能力.为更加安全地部署此类模型,提出了一种基于CLIP (contrastive languageimage pre-training)方向性损失的微调(directional CLIP loss based fine-tuning, CLIF)算法,使用方向性的CLIP损失来微调模型,以抑制其生成不适当内容的能力. CLIF消耗的计算资源很少,并且具有强制生效的特点.为评估其抑制效果,提出了CTP (categorized toxic prompts)用于评估文本–图像生成模型的不适当内容生成能力.在CTP与COCO (common objects in context)上的实验结果表明, CLIF能够在抑制文本–图像扩散模型生成不安全内容的同时不影响其一般性生成能力.
- 吴平林欣
- 关键词：安全性数据集
- 距离敏感大小可变化的最优范围位置查询的计算方法
- 本发明公开了一种距离敏感大小可变化的最优范围位置查询的计算方法，该方法包括以下步骤：为数据构造网格，每个网格单元进行映射，并构建横纵线得到交叉点集，为所有有效的交叉点定位构造一个最大矩形，并使其慢慢回缩直至找到一个最优的...
- 林欣罗序辉邱鑫周慧君王桢陈黎
- 文献传递
- 基于递归结构的神经网络架构搜索算法被引量：2
- 2022年
- 神经网络架构搜索算法旨在通过计算机的启发式搜索代替人工搜索,在巨大的神经网络结构空间中寻找更为高效的神经网络结构.许多研究通过引入各种对搜索空间的约束来解决早期神经网络结构搜索效率低下、耗时长的问题.然而,对于搜索空间的约束虽然能够提升并稳定所搜索到的模型的性能,但同时也导致了很多潜在的高性能模型结构无法被搜索到.构建了一种更为关注神经网络宏观结构的递归型搜索空间,并提出通过分步渐进搜索方案探索这个搜索空间的神经网络架构搜索算法.实验表明,该算法能在复杂的搜索空间中高效完成神经网络架构搜索任务,但与最新的基于受约束搜索空间的神经网络架构搜索算法相比仍稍有差距.
- 李继洲林欣
- 关键词：图像分类卷积神经网络
- 一种基于图谱模型的话题探测系统
- 本发明公开了一种基于图谱模型的话题探测系统，该系统包括预处理模块、图谱结构构造模块和子图探测模块，预处理模块对语料文本集预处理；图谱结构构造模块用于构造表示原型的图谱结构，其顶点为语料文档的词项，其边缘为词对之间的相关度...
- 林欣赵昂杨静贺樑
- 文献传递
