喜报 | 我院学生在计算机国际顶会CVPR举办的挑战赛中荣获亚军
近日,计算机视觉国际顶级会议CVPR 2024举办的图像复原与增强国际挑战赛(New Trends in Image Restoration and Enhancement Workshop and Associated Challenges, NTIRE)陆续颁奖。由中山大学网络空间安全学院杨建权副教授指导,学院2022级研究生张华聪、2022级研究生谢海逸、2021级本科生王诚威与阿里巴巴安全部技术专家组成的队伍荣获AI生成内容质量评价-图像赛道亚军。
获奖证书
CVPR举办的NTIRE挑战赛是智能图像复原与增强领域具有重要影响力的国际赛事之一,自2016年起已连续举办9届。NTIRE 2024分为低光照增强、立体图像超分、人像质量评价等共23个赛道,吸引了约翰斯·霍普金斯大学、多伦多大学、清华大学、北京大学等国内外高校,华为、腾讯、字节跳动、三星等科技公司组队参赛。NTIRE本年度首次增设AI生成内容质量评价赛道,旨在促进AI内容的高质可控生成。该赛道要求参赛队伍设计智能算法,自动分析文生图模型的生成质量并给出接近于人类评价的分值,需要从文本描述与图像内容的匹配度、生成图像的视觉质量等多个维度综合考虑。
我院队伍广泛挖掘多种单模态和双模态模型的质量评价潜力,在视觉模态探索了卷积神经网络Convnext和Transformer类网络Eva模型,在语言模态探索了Bert、Debert和Roberta模型。单个双模态模型对生成图像质量的机器评分与人类评分高度接近,Spearman相关系数即达到了0.91,性能进入前五。为进一步增强机器评分的准确性和稳定性,队伍最终采用了多个异构子模型的集成决策方案。本次参赛所设计的生成内容质量评价方法不仅具有直接应用价值,而且对生成内容溯源检测等领域也具有重要启发和促进作用。
网络空间安全学院建立健全“三全育人”工作体系,促进“五个融合”。学院将继续强化学生科研创新训练,鼓励学生参加科技竞赛,提升学生的学习力、思想力、行动力,为国家和社会培养出更多具有创新精神、实践能力的网络安全人才。