联系我们

研究成果

RESEARCH RESULTS
您当前所在位置: 首页 / 研究成果 / 期刊论文

团队论文在中科院一区top SCI期刊 Information Processing & Management发表

发布时间:2023-08-22 浏览量:

团队博士生孙凯丽同学论文HVLM: Exploring Human-Like visual Cognition and Language-Memory Network for visual Dialog 被SCI一区top/ SSCI一区期刊INFORMATION PROCESSING & MANAGEMENT接收。

该论文针对:视觉对话通常利用对象级视觉特征来表示整个图像,只关注图像的局部视角,而忽略了图像中全局信息的重要性。提出了一种新的视觉对话类人类视觉认知与语言记忆网络(HVLM)模型,模拟人类视觉系统的全局和局部双视角认知,全面理解图像。HVLM由局部到全局图卷积视觉认知(LG-GCVC)和问题引导语言主题记忆(T-Mem)两个关键模块组成。具体而言,在LG-GCVC模块中,设计了一个问题引导的双视角推理,通过一个简单的谱图卷积网络,从局部和全局角度联合学习视觉内容。此外,在T-Mem模块中,设计了一种迭代学习策略,通过注意机制逐步增强细粒度的文本上下文细节。实验结果证明了该模型的优越性,在VisDialv1.0和VisDialv0.9基准数据集上取得了相当的性能。

 

该期刊是一份领先的国际期刊,由特许商学院协会学术期刊指南、澳大利亚商学院院长理事会、中国科学院(CAS)、中国计算机联合会(CCF)、BFI(丹麦)、计算研究与教育(核心)期刊排名、出版论坛(芬兰)、科学引文索引扩展、社会科学引文指数、Scopus和SCImago杂志排名(SJR)。专注于发表经过同行评审的关于信息科学领域的理论、方法或应用的原创研究,包括: 1. 信息科学、信息搜索或信息检索的研究,涉及信息的生产、表示、组织、存储、检索、使用或评价,以及与这些过程相关的工具和技术 2. 人类信息行为和相关领域的研究,涉及信息或知识的性质、表现、行为和效果,以及信息或知识的传播和分布 3.涉及信息研究或设计的特定领域的研究,包括web搜索、在线广告、公共关系、通信、管理信息系统、计算经济学、计算广告、web分析、在线新闻、书目计量学、科学计量学、卫生信息学或类似领域 4. 从事信息系统领域中与数字图书馆、知识管理系统、多媒体处理、人机界面或系统评价相关的实验过程的系统设计研究。



最新新闻

查看更多