本发明属于数字图像处理技术领域，涉及一种面向生物特征隐私保护的人像加解密系统，包括：人像数据采集系统、人像特征提取系统、基于数据传输能力的网络传输能力判断系统、基于编码解码框架与身份特征的人像图像加解密系统、基于混沌系统的人像特征向量加解密系统。基于数据传输能力的网络传输能力判断系统主要依据传输网络的宽带传输能力和前端一体机所连接服务器类型的不同，选择基于编码解码框架与身份特征的人像图像加解密系统或基于混沌系统的人像特征向量加解密系统。本发明通过二种加密系统的协同配合，实现了人像生物特征的实时加密，减少数据泄露的可能性，同时在服务器端对加密数据进行解码，进而保证人像识别的准确性。