基于Transformer的东巴画超分辨率重建

• 全文链接
• 请求原文

作   者：

毕聪;  钱文华;  普园媛; 

作者机构：

云南大学计算机科学与工程系; 

关键词：

东巴画;  超分辨率;  通道注意力;  Swin Transformer; 

期刊名称：

计算机辅助设计与图形学学报

i s s n：

1003-9775

年卷期：

2024 年 36 卷 011 期

页   码：

1739-1749

摘   要：

纳西族东巴画线条繁杂、色彩丰富,直接采用现有的方法对真实场景下的低分辨率东巴画图像进行超分辨率重建,存在线条不够清晰、局部区域过度平滑、缺少细节等问题.为了解决上述问题,提出一种基于Transformer的东巴画超分辨率重建方法.首先,生成器采用卷积层和残差密集Swin Transformer块提取东巴画图像的浅层和深层特征,并通过重建模块融合特征,重建出高分辨率图像;其次,判别器采用U-Net评估每个像素的真实性,增强重建图像的纹理细节;最后,采用像素损失、感知损失和对抗损失训练生成器生成自然清晰的东巴画图像.在自建的东巴画测试集上与其他8种方法进行对比,结果表明,所提方法的重建结果具有更好的视觉质量;在放大2倍、4倍和8倍时,平均PIQE分别为22.749 3, 20.264 9和18.378 0,平均ENIQA分别为0.091 7, 0.063 9和0.068 4,均优于其他方法;所提方法具有良好的扩展性,在自然图像上进行实验也能获得更清晰的结果.