本发明公开了一种基于稀疏编码慢特征函数的行为识别方法，包括下述步骤：Ｓ１、对训练集和测试集的视频进行预处理；Ｓ２、对步骤Ｓ１预处理后的视频，检测特征点；Ｓ３、对视频中的特征立方体，提取慢特征函数；Ｓ４、对步骤Ｓ３提取到的慢特征函数系数进行稀疏编码，获得稀疏慢特征函数系数；Ｓ５、对步骤Ｓ４得到的稀疏后的慢特征函数与特征立方体做运算，结果作为特征表述子；Ｓ６、利用ＳＶＭ分类器对得到的特征表述子进行特征分类。本发明利用慢特征分析算法提取了行为中的不变量，并通过稀疏编码的方式去除慢特征的冗余信息，此特征函数具有很强的识别能力，识别效果及系统鲁棒性都好。