本发明提供了一种基于舌体分区颜色特征的智能图像分类方法。首先，基于方向梯度直方图特征对大量的舌体图片数据进行训练，利用训练结果对视频中的舌体进行定位，然后进行更为精确的分割，接着将分割出的舌体区域划分为不同的区域，提取每一区域的像素在ＲＧＢ颜色空间上进行分离，对每一区域统计颜色直方图。最后根据颜色直方图和区域位置做相似度的计算，输出与视频舌体区域最为相似的舌体图片。本发明检测准确率高，能利用舌体区域划分找出不同区域颜色都近似的图片。输出的视频图像分类结果可用于多模态生物特征识别中作为辅助识别手段的基于舌体特征的身份识别，还可用于人工智能应用中的生物信息图像分类。