鲁继文清华大学自动化系2020年2月12日智能视觉感知与推理2•视觉感知代表性任务人脸识别物体分割行为识别物体检测物体跟踪视频摘要3•视觉推理代表性任务空间关系推理？时序关系推理4•深度度量学习学习图像空间到语义空间的非线性变换5•距离度量学习度量学习的目标是学习出图像之间的距离计算方法，以精准而鲁棒地描述目标之间的相关性•度量学习发展历史19942004SiameseDML2002NCA深度度量学习2014DDML2015FaceNet6LMNN2005Contrastive20062007ITMLOASIS20092016Lifted2017HDC2018DAML7•深度度量学习解决的问题小样本数据的相似性训练样本少参数规模小多视图数据的相似性多视角融合多模态匹配非均衡数据的相似性难样本挖掘自适应采样8•小样本深度度量学习跨数据库识别亲属关系识别视觉目标跟踪人脸识别9•判别深度度量学习[1]JunlinHu,JiwenLu,andYap-PengTan,DiscriminativeDeepMetricLearningforFaceVerificationintheWild,CVPR,pp.1875-1882,2014.(516citations)[2]JiwenLu,JunlinHu,andYap-PengTan,DiscriminativeDeepMetricLearningforFaceandKinshipVerification,TIP,vol.26,no.9,pp.4269-4282,2017.(114citations)学习到的特征表示样本对之间的距离10•判别深度度量学习[3]JunlinHu,JiwenLu,andYap-PengTan,DeepMetricLearningforVisualTracking,TCSVT,vol.26,no.11,pp.2056-2068,2016.11•深度迁移度量学习[4]JunlinHu,JiwenLu,andYap-PengTan,DeepTransferMetricLearning,CVPR,pp.325-333,2015.[5]JunlinHu,JiwenLu,Yap-PengTan,andJieZhou,DeepTransferMetricLearning,TIP,vol.25,no.12,pp.5576-5588,2016.12•多视图深度度量学习图像集合分类多特征融合识别视频人脸对齐多模态人体动作识别13•多流形深度度量学习[6]JiwenLu,GangWang,WeihongDeng,PierreMoulin,andJieZhou,Multi-ManifoldDeepMetricLearningforImageSetClassification,CVPR,pp.1137-1145,2015.(138citations)14•多特征深度度量学习[7]JunlinHu,JiwenLu,andYap-PengTan,SharableandIndividualMulti-viewMetricLearning,TPAMI,vol.19,no.9,pp.2281-2288,2018.15•多特征深度度量学习[8]LiangliangRen,JiwenLu,JianjiangFeng,andYap-PengTan,UniformandVariationalDeepLearningforRGB-DObjectRecognitionandPersonRe-identification,TIP,vol.28,no.10,pp.4970-4983,2019.16•多特征深度度量学习结合视频中单帧内的空间信息与多帧之间的时序信息，...
