10月25日,计算机科学学院在笃行楼614会议室举办了研究生“极客论坛”第十五期——《深度学习模型持续学习的研究进程与趋势》专题报告。本次报告由西安电子科技大学程德教授主讲,130余名研究生参加。
报告会上,程德教授首先介绍了连续学习的基本概念,强调了其重要性及面临的挑战;随后,他分享了基于平衡正交投影的类增量学习方法,该方法通过正交投影技术有效保护了旧知识,实现了对新知识的有效学习;接着,他引入了基于稀疏网络正交优化的任务连续学习的核心思想,介绍如何利用稀疏性约束优化网络结构,提高深度学习模型持续学习的效率和性能;之后,他还介绍了基于正交投影的视觉提示微调连续学习方法,讲述如何通过正交投影将视觉提示嵌入到持续学习模型中,以增强模型对新任务的适应能力;最后,程德教授展示了他所领导的课题组在深度学习模型持续学习方面的最新研究成果。
(撰稿:吕瑞羽 审稿:薛涛 闫小兵)