李宏毅2022课程视频全部以线上视频的形式给出(已经全部录好,你可以选择短时间全部学完),上课时间会直播讲解额外的内容(可以不听)和作业(建议一定要做),目前已更新到作业14。
第十四课主要内容是Life Long Learning,神经网络的终身学习。课程介绍了life long learning的研究背景,以及研究难点:解决catastrophic forgetting(灾难性遗忘)。李老师着重解释了Selective Synaptic Plasticity的方法,另外也提到了Additional Neural Resource Allocation和Memory Reply这两种方法,详细信息见课程视频。
-
课程视频:
b站视频号:机器学习手艺人
网址:https://www.bilibili.com/video/BV1Z34y1C7sj?spm_id_from=333.999.0.0
-
Github:课堂和作业课件及基础代码
网址:https://github.com/yaoweizhang/LHY2022-SPRING
作业十四需要助教代码,文末有本次作业的助教代码和作业介绍文档的获得方式。
-
作业任务:
LifeLong Learning(基于MINST数据集)。本次作业一共有20个问题,学生需要在sample code中实现或了解包括EWC, MAS, SI, RWalk, SCP等方法。
-
提交地址:
gradescope,非课程学生用不了。
截止日期:
2022/06/24 23:59(北京时间)。
-
QQ交流群:156013866
作业十四助教代码和数据获得方式:
-
关注微信公众号 “机器学习手艺人”
-
后台回复关键词:202214