Tesseract:簡單的Java光學字元識別
- 2019 年 10 月 3 日
- 筆記
1.1 介紹
開發具有一定價值的符號是人類特有的特徵。對於人們來說識別這些符號和理解圖片上的文字是非常正常的事情。與電腦那樣去抓取文字不同,我們完全是基於視覺的本能去閱讀它們。
另一方面,電腦的工作需要具體的和有組織的內容。它們需要數字化的表示,而不是圖形化的。
有時候,這是不可能的。有時,我們希望自動化的完成用雙手從影像重寫文本的任務。
針對這些任務,光學字元識別(OCR)被設計成一種允許電腦以文本形式「閱讀」圖形化內容的方法,和人類工作的方式相似。雖然這些系統相對準確,但仍然可能有相當大的偏差。即便如此,修復系統的錯誤結果也遠比手工從頭開始要更加容易和快速。
就像所有的系統一樣,本質上是相似的,光學字元識別軟體在準備好的數據集上進行訓練,這些數據集提供了足夠多的數據用來幫助學習字元間的差異。如果我們想讓結果更加準確,那麼這些軟體如何學習也是非常重要的話題,不過這將是另外一篇文章的內容了。
與其重新造輪或者想出一個非常複雜(但有用)的解決方案,不如我們先坐下來看看已有的解決方案。
1.2 Tesseract
科技巨頭 Google 一直在開發一個 OCR 引擎 Tesseract ,它從最初誕生到現在已有數十年的歷史。它為許多語言提供了API,不過我們將專註於 Tesseract 的 Java API 。
很容易使用 Tesseract 來實現一個簡單的功能。它主要用於讀取電腦在黑白圖片上生成的文字,並且結果的準確度較好。但這不是針對真實世界的文本。
對於現實世界中,我們最好使用像Google Vision 這樣的更高級的光學字元識別軟體,這將在另一篇文章中討論。
1.2.1 Maven依賴
我們只需要簡單的添加一個依賴,就可以將引擎引入到我們的項目:
<dependency> <groupId>net.sourceforge.tess4j</groupId> <artifactId>tess4j</artifactId> <version>3.2.1</version> </dependency> 1.2.2 光學字元識別
使用 Tesseract 毫不費力:
Tesseract tesseract = new Tesseract(); tesseract.setDatapath("E://DataScience//tessdata"); System.out.println(tesseract.doOCR(new File("..."))); 我們先實例化一個 Tesseract 實例,然後為已訓練好的 LSTM (長短期記憶網路)模型設置數據路徑。
數據可以從官方GitHub帳號處下載。
然後我們調用 doOCR() 方法,該方法接受一個文件參數並且返回一個字元串——提取的內容。
讓我們給它提供一張有著大而清晰的黑色字元的白色背景圖片:
提供這樣一張圖片會獲得完美的結果:
Optical Character Recognition in Java is made easy with the help of Tesseract' 不過這張圖片掃描起來過於簡單了。它已經被歸一化,而且有高解析度和一致的字體。
讓我們來試試在紙上手寫一些字元並將該圖片提供給應用程式,這將會發生些什麼呢:
我們可以立即看到結果的改變:
A411「, written texz: is different {mm compatar generated but 有一些單詞十分準確,並且你可以很輕鬆的辨認出 「written text is different from computer generated」 ,但是第一個和最後一個單詞差得有點多。
現在,為了讓程式使用起來更簡單,我們把它轉換成一個十分簡單的 Spring Boot 應用程式,用更加舒適的圖形化介面來展示結果。
1.3 實現
1.3.1 Spring Boot應用程式
首先,從使用Spring Initializr創建我們的項目開始。它包含spring-boot-starter-web和spring-boot-starter-thymeleaf依賴。然後我們手動導入Tesseract:
1.3.2 控制器
該應用程式只需要一個控制器,它將為我們提供兩個頁面的展示、處理圖片上傳和光學字元識別功能:
@Controller public class FileUploadController { @RequestMapping("/") public String index() { return "upload"; } @RequestMapping(value = "/upload", method = RequestMethod.POST) public RedirectView singleFileUpload(@RequestParam("file") MultipartFile file, RedirectAttributes redirectAttributes, Model model) throws IOException, TesseractException { byte[] bytes = file.getBytes(); Path path = Paths.get("E://simpleocr//src//main//resources//static//" + file.getOriginalFilename()); Files.write(path, bytes); File convFile = convert(file); Tesseract tesseract = new Tesseract(); tesseract.setDatapath("E://DataScience//tessdata"); String text = tesseract.doOCR(convFile); redirectAttributes.addFlashAttribute("file", file); redirectAttributes.addFlashAttribute("text", text); return new RedirectView("result"); } @RequestMapping("/result") public String result() { return "result"; } public static File convert(MultipartFile file) throws IOException { File convFile = new File(file.getOriginalFilename()); convFile.createNewFile(); FileOutputStream fos = new FileOutputStream(convFile); fos.write(file.getBytes()); fos.close(); return convFile; } } Tesseract 可以和Java的 File 類一起工作,但是不支援表單上傳的 MultipartFile 類。為了便於處理,我們添加了一個簡單的 convert() 方法,它將 MultipartFile 對象轉換成一個普通的 File 對象。
一旦我們利用 Tesseract 提取出了文本,我們只需將該文本和掃描的影像一起添加到模型當中,然後附加到重定向的展示頁面 - result。
1.3.3 展示頁面
現在,讓我們定義一個包含簡單文件上傳表單的展示頁面:
<html> <body> <h1>Upload a file for OCR:</h1> <form method="POST" action="/upload" enctype="multipart/form-data"> <input type="file" name="file" /><br/><br/> <input type="submit" value="Submit" /> </form> </body> </html> 以及一個結果頁面:
<html xmlns:th="http://www.thymeleaf.org"> <body> <h1>Extracted Content:</h1> <h2>><span th:text="${text}"></span></h2> <p>From the image:</p> <img th:src="'/' + ${file.getOriginalFilename()}"/> </body> </html> 運行這個應用程式將會有一個簡單的交互介面迎接我們:
添加一個圖片並提交它,螢幕上的結果將會包含提取的文本和上傳的圖片:
成功了!
1.4 結論
利用Google的 Tesseract 引擎,我們搭建了一個十分簡單的應用,它接受從表單提交來的圖片,從中提取文本內容,最後將結果和圖片一起返回給我們。
由於我們只使用了 Tesseract 有限的功能,所以這不是一個特別有用的應用程式。而且該應用程式對於演示目的之外的任何其他用途都過於簡單,但是它可以作為一個有趣的工具來實現和測試。
當你想把內容數字化時,光學字元識別可以很快上手,特別是針對文檔。他們很容易被掃描,並且提取的內容準確度也較好。當然,為了避免潛在的錯誤,對結果文檔進行校對總是明智的。
8月福利準時來襲,關注公眾號
後台回復:003即可領取7月翻譯集錦哦~
往期福利回復:001,002即可領取!
