增强阅读效果用于手写文档图像增强的改进生成对抗网络
发布日期：2021-08-23 16:30:38
导读 用于手写文本识别的文档通常会受到降级的影响。例如，历史文档可能会受到损坏的文本、灰尘或皱纹的影响。不正确的扫描过程或水印和图章也可
用于手写文本识别的文档通常会受到降级的影响。例如，历史文档可能会受到损坏的文本、灰尘或皱纹的影响。不正确的扫描过程或水印和图章也可能导致问题。经典的图像恢复技术试图扭转退化效应。但是，模型可能会在清理图像时使文本质量变差。
因此，一组科学家提出了一种深度学习模型，该模型不仅可以从手写图像中学习其参数，还可以从相关文本中学习其参数。它基于生成对抗网络 (GAN)，并具有评估恢复图像可读性的识别器。对退化的阿拉伯语和拉丁语文档进行的实验证明了所提出模型的有效性。还表明，从退化域到干净版本逐步训练识别器可以提高识别性能。
由于多种原因，手写文档图像可能会受到严重退化的影响：纸张老化、日常生活场景(皱纹、灰尘等)、扫描过程不良等。这些工件给当前的手写文本识别 (HTR) 算法带来了许多可读性问题，并严重降低了它们的效率。在本文中，我们提出了一种基于生成对抗网络 (GAN) 的端到端架构，以将退化的文档恢复为干净可读的形式。与最知名的文档二值化方法试图提高退化文档的视觉质量不同，所提出的架构集成了一个手写文本识别器，可以提高生成的文档图像的可读性。据我们所知，这是在二值化手写文档时使用文本信息的第一项工作。对退化的阿拉伯语和拉丁语手写文档进行的大量实验证明了将识别器集成到 GAN 架构中的有用性，这提高了退化文档图像的视觉质量和可读性。此外，我们在 H-DIBCO 2018 挑战赛中的表现优于现有技术，在此任务中，我们使用合成降级的拉丁手写图像对我们的预训练模型进行了微调。
标签：
免责声明：本文由用户上传，如有侵权请联系删除！