本发明针对非对称图像加密方法的密文和秘钥数据量大的问题，提出一种基于频谱融合的非对称双图像加解密方法。该方法首先采用离散余弦变换将待加密的两幅图像进行空域到频域转换，然后利用频谱融合将去掉部分高频信息后的半频谱图拆分成低频和高频图像，最后使用柱面衍射域的相位截断方法进行加密，有效地减少了密文和秘钥的数据量。本方法有效地构建了非对称加解密系统，使得本发明的图像加解密方法安全性高，且频谱融合方法也使得本方法的解密质量好。