Face to Webtoon

简介：
Face to Webtoon是一款创新的应用程序，它能够将用户的真实面部图像转化为独特的网络漫画风格角色。这款应用利用先进的AI技术，提供个性化的定制服务，让用户轻松体验不同风格的角色扮演乐趣。 尽管将图像到图像（I2I）转换应用于网络漫画（Webtoon）的研究较少，但我从Naver Webtoon收集了数据集，并尝试进行人脸向Webtoon风格的迁移。由于现有的面部检测器在识别Webtoon中的脸部时效果不佳，我仅能获得大约1400张适合用于研究的人脸图像。 对于基准模型，我选择了U-GAT-IT（未配对图像到图像翻译GAN），该模型通过使用CAM注意模块和自适应图层实例归一化，在需要大量形状变形的图像转换任务中表现出色。鉴于Webtoon与人脸数据之间的显著形态差异，我认为这个模型是合适的。 在实验过程中，我采用了AFAD-Lite面部数据集进行训练。尽管一些结果看起来不错，但在迁移时仍有许多属性丢失的问题存在：性别信息经常被忽略；眼镜等配件也无法正确生成。 通过对这些结果的分析发现，在将真实人脸转换为Webtoon风格的过程中，模型难以保留所有细节和特征。这表明在处理高度变形图像的任务中，现有的技术可能还需要进一步改进和完善。