旧版网站 | ENGLISH
当前位置: 首页 | 学院新闻 | 正文
我院视觉计算与智能感知创新团队成员冯光副教授在CCF A类期刊IEEE T-PAMI上发表研究成果
作者: 时间:2022-11-14 点击:

近日,我院视觉计算与智能感知创新团队成员冯光副教授针对指称分割中跨模态融合问题,首次探索多模态特征间的编码融合策略,并取得原创性研究成果。相关成果以Referring Segmentation Via Encoder-Fused Cross-Modal Attention Network”为题,发表于国际顶级期刊IEEE Transactions on Pattern Analysis and Machine Intelligence (T-PAMI人工智能、计算机视觉、模式识别等多个领域的顶级期刊,影响因子高达24.314CCF A类期刊)。冯光副教授为第一作者,济南大学信息科学与工程学院为第二贡献单位,实现了我院在人工智能领域顶级期刊T-PAMI发表论文的历史性突破。

指称分割任务旨在根据语言表达的描述定向地分割图像(或视频)中相应的视觉区域。对于这个跨模态任务,现有的方法通常在网络的解码端考虑多模态特征之间的相互作用,但它们通常忽略了多尺度特征之间的相关性。论文首次提出了编码器融合策略,其利用协同注意力机制,将语言特征嵌入到视觉编码器中,将其转换成多模态特征编码器,并实现语言对不同尺度多模态特征的渐进式引导。其中协同注意力机制用于学习多模态特征的共同映射,使它们在新的特征子空间有更好的语义一致性,以最大程度发挥语言的引导作用。对于视频数据,该文章引入了非对称的跨帧注意力机制其在保证合理计算量的同时,有效地从视频帧中捕获了时序信息在应用方面,该文章所提出的模型在指称图像/视频分割国际标准数据集上取得领先结果,分割性能显著地优于已有模型。

冯光博士系我院2022年以高层次人才(学术骨干,副教授)引进,加入信息科学与工程学院视觉计算与智能感知创新团队。冯博士先后在国际期刊和会议发表学术论文20篇,其中第一作者发表论文12篇(包含T-PAMI、CVPR、TNNLS、Pattern Recognition 等)。




近期新闻
15
22/11
济南大学信息科学与工程学院在第47届ACM-ICPC国际大学生程序设计竞赛亚洲区域赛中获得银牌
14
22/11
我院视觉计算与智能感知创新团队成员冯光副教授在CCF A类期刊IEEE T-PAMI上发表研究成果
11
22/11
信息科学与工程学院党委与济南市生活废弃物处理中心党总支举行党建联建共建基地签约揭牌仪式
09
22/11
信息科学与工程学院举办社会服务、科技成果转化专题座谈会
09
22/11
信息科学与工程学院召开本科教学质量月工作推进会暨本科人才培养研讨会
07
22/11
信息科学与工程学院举办“新生杯”师生篮球友谊赛
图文快讯
信息科学与工程学院与临沂市蒙阴县烟庄村共建“党员活动教育基地”和“大学生社会实践基地”

 6月29日,济南大学信息科学与工程学院与临沂市蒙阴县野店镇烟庄村共建“党员活动教育基地”和“大学生社会实践基地”揭牌仪式在沂蒙六姐妹纪念馆会议室举行,团山东省委统战联络部副部长、省派蒙阴县野店镇烟庄村第一书记邹见,烟庄村党支部书记孙云贵,济南大学信息科学与工程学院党委书记李超,党委副书记、副院长董晓慧,团委书记王豪出席签约仪式,烟庄村两委成员、学院全体辅导员以及社会实践团队成员参加仪式。邹见书记...

学院概况 学院简介 现任领导 组织机构 地理位置
党建工作 党建规章 组织机构 党建动态
师资队伍 教师名录 教师风采
本科生教育 专业建设 课程建设 教材建设 培养方案 教学成果 教学动态 招生信息
研究生教育 学位点介绍 导师简介 培养方案 教学成果 教学动态 招生信息
学科建设 学科简介 平台建设
科学研究 科研动态 学术交流 研究团队 科研立项 科研奖励 成果转化 国际合作
学生工作 学团动态 学工队伍 学生科创 学生风采 心灵驿站 学生社团 就业信息
院友空间 院友会 院理事会 院友风采
联系我们 院长信箱 师德师风反馈
公众号“济大信息青年”

地址:山东省济南市南辛庄西路336号济南大学信息科学与工程学院
邮编:250022
电话:0531-82767500
邮箱:ise_bgs@ujn.edu.cn

版权所有@1995-2022 济南大学信息科学与工程学院