OpenCV+tess-two的随笔

前提:突发情况下需要去了解下“文字的识别”的技术(android 平台下)。然后立马想到的方法有

1.利用现有的SDK.

2.查找开源的技术。

先说说现有的SDK吧。首先找到的是百度云:https://cloud.baidu.com/product/ocr.html

不过测试结果不太理想,他们的做法是拍照->截图->图片转Base64 上传到服务器识别。大多数情况下对手写字体的识别率很低。机打字体还是有一定的成功率的。其他的证件识别就没有测试过。另外提一句就是百度提供的是在一定的次数下是免费的。

具体的实现方式看百度云的文档说明了,不过有一点:在创建app的时候

这个(文字识别包名)是需要钩上的 。不然的话识别不了。

其他的SDK 暂时没有查找咯。

遵循做技术的嘛,看看实现文字识别是用哪里技术实现的。最后发现实现的技术之一是用openCV 加上 google 提供的tess-two (其他的技术实现方式暂不讨论了).大概的思路是

(ps:在这里感谢:shuishuige93  如果提供代码的话越好,可惜只是如果)

处理图像这块是 是由OpenCV-android(ps:http://opencv.org)担任的.版本的话好像到了openCV3.3 。可是我android studio 能下载的是3.1的版本

具体的android studio (android studio 3.0 Beta5  buildToolsVersion:26.0.1)导入方式:


在build.gradle 添加
implementation 'org.opencv:OpenCV-Android:3.1.0'

大部分在网的找出的技术文档 和教程 是openCV 的c++ 的 然后就是版本低的,openCv 还分opencv4android,opencvjava.(不过技术都是相同的) ,然而我还是不想用 .cpp 啥的 虽然

android studio 不知道在几版本后提供了更好的NDK开发套件(cmake).但总感觉人家提供了opencv4android 后还得去写c(如果是高手,如要定制化的功能还是要写,咱是小白能最快实现目的就好了,虽然知识很重要).所以我尝试去实现。

1.灰度化  ,二值化

灰度图(Gray Scale Image)又称灰阶图,它是指把白色与灰色按对数关系分为若干等级,称作灰阶。灰度分为256阶,用灰度表示的图像称为灰度图

(感谢shuishuige93  )

详细的描述 灰度化,二值化(http://blog.csdn.net/evsqiezi/article/details/7905436

 实现灰度化方式是OpenCV里的cvtColor(Matsrc, Mat dst, int code); c 下的实现方式。所以百度了 android 灰度化。在这里提供了基于bitmap和opencv的很好的解决方式(http://blog.csdn.net/kazichs/article/details/52914406) (不过这里使用opencv 对应的不是open 3.1 至少我查看了open3.1的代码没有发现  OpenCVLoader.initAsync ,只有openCVLoader.initDebug,这句话肯定要写的,不然会报错滴)

2.膨胀和腐蚀

 通俗的说:

膨胀算法使图像扩大一圈。
腐蚀算法使二值图像减小一圈。
腐蚀:删除对象边界的某些像素
膨胀:给图像中的对象边界添加像素

详细的说明 (ps: http://m.blog.csdn.net/u011028345/article/details/76152243 )

Dilate 使用任意结构元素膨胀图像,Erode 使用任意结构元素腐蚀图像.然后又得找。

其实在灰度和二值化的时候 都是通过 org.opencv.imgproc.Imgproc 下的方法进行转变的.其他的都是一些mat 和 bitmap的转换。所以 腐蚀是Imgproc.erode(Mat src, Mat dst, Mat kernel)

膨胀是dilate(Mat src, Mat dst, Mat kernel)

kernel:是一个腐蚀膨胀计算的核心

Mat kernel = Imgproc.getStructuringElement( Imgproc.MORPH_RECT,new Size(2, 2));

当然具体的参数另行参考了。

3.还有一个图形校正

轮廓提取技术
霍夫变换知识
ROI感兴趣区域知识

这个就比较蛋疼.虽然参考

http://www.cnblogs.com/skyfsm/p/6902524.html   图像矫正技术深入探讨(这个应该是个大牛)

http://www.cnblogs.com/panxiaochun/archive/2016/05/20/5512142.html opencv直线检测在c#、Android和ios下的实现方法

https://github.com/johnhany/MOAAP 针对的Android版本从API 19到API 21不等,同时使用的OpenCV库版本也有2.4.9和2.4.10两种。本文给出的代码是在原书代码的基础上,针对Android 7.0(API 24)与OpenCV 3.2进行了修改,补充了一些注释,适当地增加了一些预处理操作,以使代码整体上更合理 (这里面也讲到了霍夫变化)

到此 处理图像 被乱棍打死了。

文字的识别

android studio 中导入

implementation 'com.rmtheis:tess-two:8.0.0'

并且在这里 https://github.com/tesseract-ocr/tessdata 下载相应的语言文字包(英文:eng.traineddata    中文:chi_sim.traineddata),但是一个个包不是30m,就是70 m。所以app在进行文字识别的化 最好用tess 提供的套件自己训练简单的 语言包。

下载好后,放到

当然tessdata 你也可以写其他的名字,语音包首先要移动到内存中,在初始化tess中会查找路径

m_datapath 是指定的文件路径,  m_zh_lang 是语言包的名字 ,

并不需要后缀名。

针对识别的话 可以识别mat 或者bitmap

大概吧,就这些。

最后识别的结果。手写文字 差评,整页文字差评,单行截图(寥寥几个文字的)还好的。

所有啊任重而道远啊

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,126评论 6 481
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,254评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 152,445评论 0 341
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,185评论 1 278
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,178评论 5 371
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,970评论 1 284
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,276评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,927评论 0 259
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,400评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,883评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,997评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,646评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,213评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,204评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,423评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,423评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,722评论 2 345

推荐阅读更多精彩内容