南理工读计算机视觉硕士优势,研究生成果 | 南京大学软件学院2018级硕士研究生于凡…

  • Post author:
  • Post category:其他


原标题:研究生成果 | 南京大学软件学院2018级硕士研究生于凡

于凡

南京大学软件学院2018级硕士研究生

成果描述:

63e1eafee9768886d29bbfa941cc0184.png

ECCV(European Conference on Computer Vision)与CVPR、ICCV并称为计算机视觉三大顶级会议,每两年举办一次(与ICCV间隔举办)。ECCV与CVPR、ICCV一同为全世界的计算机视觉研究者和爱好者提供了交流分享最新技术和成果的平台。由于计算机视觉研究注重与实际应用的结合,ECCV会举办多项技术挑战赛,PIC(Person in Context)是今年ECCV的技术挑战赛之一,旨在以视觉关系三元组的形式表示出图像中人与周围人/物体的交互关系,具有较高的挑战性。

《基于Mask R-CNN和VTransE的以人为中心的视觉关系分割》

《Human-centric Visual Relation Segmentation Using Mask R-CNN and VTransE》

6ad05425a23d72227233850255e54ef2.png

d227a54339f3cc00682b45f5d613fbe5.png

视觉关系检测一直是学界和工业界共同关注的问题,它能够为理解图像提供更多物体层面的信息。我们提出了一个基于Mask R-CNN和VTransE模型的以人为中心的视觉关系分割方法。当前的研究工作主要是导出所有的“主语-宾语”视觉关系,而以人为中心的关系由于涉及到行为动作以及多种物体互动,比传统的物体关系更复杂和有挑战性。该工作以目前最先进的物体分割方法Mask R-CNN和关系预测方法VTransE为基础,辅以基于人脸检测的人物定位方法,提出了一种新颖的以人为中心的视觉分割方法,在技术竞赛所提供的测试数据集上击败了其它队伍,取得了首届PIC技术竞赛冠军。

ddceb35f27894a683d12cdff7a20274c.png

科研感悟:

科研需要长时间各个相关领域的知识积累和自我思考才能获得灵感和方向。良好的实验习惯、熟练的研究技巧和坚韧健康的工作心态也是求取成果过程中不可缺少的因素。研究的过程中需要保持思辨,开放眼界,不断反思才能使得自己当前的工作保持正确有效的方向。

论文链接:

http://software.nju.edu.cn/rentw/publication/eccvw18pic-yuf.pdf

62755255da37fd33c65f85fff342e34f.png

640ddcd51b729a41b9d3d927b29b67a3.png

左至右依次为:刘偲老师(PIC技术竞赛主席之一),于凡,谭昕(2015级本科生,另一名共同参赛者)

e353e00d13766680430b23be1ca9e7fe.png

于凡在PIC技术竞赛的workshop上做口头报告

SE

美编 / 木易

来源/南京大学软件学院返回搜狐,查看更多

责任编辑: