还在愁做OCR法方向没有开源数据集嘛,PaddleOCR的这个工具你敢不敢看一下?

近期,PaddleOCR开源了Style-Text数据合成工具。
https://github.com/PaddlePaddle/PaddleOCR/blob/dygraph/StyleText/README_ch.md

项目主页

https://github.com/PaddlePaddle/PaddleOCR

到底多强

结合GAN,输入一串文本和一个风格图片就可以生成对应的场景的图片!!!!!项目开源直接使用无需训练!!!!

效果⬇️

该工具可以批量合成大量与目标场景类似的图像,如下图所示。
在这里插入图片描述
Style-Text数据合成工具是基于百度自研的文本编辑算法《Editing Text in the Wild》
https://arxiv.org/abs/1908.03047
在这里插入图片描述

不同于常用的基于GAN的数据合成工具,Style-Text主要框架包括:1.文本前景风格迁移模块 2.背景抽取模块 3.融合模块。如上图所示。经过这样三步,就可以迅速实现图像文本风格迁移。下图是更多的数据合成工具效果图。

在这里插入图片描述

此外,采用上述合成数据和真实数据一起训练,可以显著提升特殊场景的性能指标,Repo中也给出了两个场景应用案例:
在这里插入图片描述

下面给出一些真实场景图像和合成图像的示例:

在这里插入图片描述

此外,该项目还提供了一批中英韩5万张通用场景数据用作文本风格图像,便于合成场景丰富的文本图像,下图给出了一些示例。

在这里插入图片描述

这个方向才刚刚开始,文本数据自动合成对于产业应用还是很有意义,尤其是长尾场景。

猜你喜欢

转载自blog.csdn.net/u012526003/article/details/111298463