本发明公开了一种基于神经网络的肖像漫画生成方法，包括以下步骤：S1、提取真实人脸图像中人脸面部的结构特征，并转化为序列特征数据；S2、将序列特征数据输入到训练好的Seq2Seq VAE模型中，生成对应夸张结构序列点；S3、将生成的夸张结构序列点应用于真实人脸图像中，对真实人脸图像的夸张变形；S4、将漫画风格应用于夸张变形后的人脸图像上，生成肖像漫画。本发明开创性地提出用序列特征表示人脸结构特征，使用Seq2Seq VAE模型进行夸张序列的生成，从而应用于漫画生成。克服了现有的图像翻译方法的局限性，生成的夸张肖像漫画不仅在不损害人物角色的辨识度的同时具有幽默夸张性，也体现在不同漫画艺术家的绘画风格。