「原创文章」python实现PDF转换TXT格式pytesseract详解
off999 2024-10-04 00:21 29 浏览 0 评论
pytesseract介绍:
pytesseract是基于Python的OCR工具, 底层使用的是Google的Tesseract-OCR 引擎,支持识别图片中的文字,支持jpeg, png, gif, bmp, tiff等图片格式。本文介绍如何使用pytesseract 实现图片文字识别。
什么是OCR?
OCR(Optical character recognition,光学字符识别)是一种将图像中的手写字或者印刷文本转换为机器编码文本的技术。通过数字方式存储文本数据更容易保存和编辑,可以存储大量数据,比如1G的硬盘可以存储数百万本书。
OCR可以做什么?
OCR技术可以将图片,纸质文档中的文本转换为数字形式的文本。OCR过程一般包括以下步骤:
图像预处理/文本定位/字符分割/字符识别/后处理,最初由惠普开发,后来Google赞助的开源OCR引擎 tesseract 提供了比较精确的文字识别API,支持100多种语言,本文将要介绍的Python库Pytesseract就是基于Tesseract-OCR 引擎。
环境要求:(win环境和liunx均可)
Python 3.6+
PIL库
安装Google Tesseract OCR
系统:windows/mac/linux,我的系统是Windows10
软件安装:(win环境支持)
Tesseract OCR github地址:https://github.com/tesseract-ocr/tesseract
Windows Tesseract下载地址:https://digi.bib.uni-mannheim.de/tesseract/
Mac和Linux安装方法参考:https://tesseract-ocr.github.io/tessdoc/Installation.html
安装时可以选择需要的语言包:
安装完成后,添加到环境变量PATH中,我的安装路径是:C:\Program Files\Tesseract-OCR 。
命令行窗口输入:tesseract ,查看是否安装成功。
温馨提示:最好不要安装到C盘因为有些电脑需要管理员权限
安装pytesseract(python环境依赖)
pip安装pytesseract,Python tesseract:https://github.com/madmaze/pytesseract
pip install pytesseract
程序案例:
import fitzfrom PIL import Imageimport pytesseract def extract_text_and_images_from_pdf(self): if not os.path.exists(self.pdf_path): log.error("执行失败:运行环境没有pdf存储路径") return # 创建图像文件夹(如果不存在) os.makedirs(self.image_folder, exist_ok=True) log.info("执行成功:图片存储路径读取成功") # 打开Step 1 pdf_file路径下保存的pdf with fitz.open(self.pdf_file) as doc: log.info("执行成功:读取存储路径PDF成功") # 判断 PDF 是否包含文本内容 has_text = False extracted_text = "" extracted_image_text = "" # 遍历pdf和分页中的文本结果 for i in range(len(doc)): page = doc.load_page(i) text = page.get_text() # 如果文本存在 if text: has_text = True # pdf中分页合并输出文本 extracted_text += f"Page {i + 1}: {text}" log.info(f"执行成功:ORC程序成功获取到PDF第(Page {i + 1})页文本信息") # 获取所有的图片数量记作i images = doc.get_page_images(i) # 遍历所有pdf中的图片,然后将图片保存 for j, img in enumerate(images): xref = img[0] pix = fitz.Pixmap(doc, xref) # 从图像创建 pixmap img_path = None # 处理pdf图片中的核心方法 if pix.n - pix.alpha < 4: # 可以直接保存为 PNG img_width, img_height = pix.width, pix.height # 设置一个阈值,比如小于100像素的图片不保存 if img_width >= 100 and img_height >= 100: img_path = os.path.join(self.image_folder, f"p{i + 1}-{j + 1}.png") pix.save(img_path) log.info(f"执行成功:ORC程序成功获取到PDF第({i + 1})页获取到(第{j + 1})张PNG图片信息") else: log.info( f"执行成功:ORC程序成功获取到PDF第({i + 1})页获取到(第{j + 1})张PNG图片尺寸较小,不保存") else: # CMYK 图像:必须先转换为 RGB pix0 = fitz.Pixmap(fitz.csRGB, pix) img_width, img_height = pix.width, pix.height # 设置一个阈值,比如小于100像素的图片不保存 if img_width >= 100 and img_height >= 100: img_path = os.path.join(self.image_folder, f"p{i + 1}-{j + 1}.png") pix0.save(img_path) log.info(f"执行成功:ORC程序成功获取到PDF第({i + 1})页获取到(第{j + 1})张RGB图片信息") else: log.info( f"执行成功:ORC程序成功获取到PDF第({i + 1})页获取到(第{j + 1})张RGB图片尺寸较小,不保存") pix0 = None # 释放 Pixmap 资源 pix = None # 释放 Pixmap 资源 if img_path is not None: img_text = pytesseract.image_to_string(Image.open(img_path)) extracted_image_text += img_text # 文本值没有获取到时输出log,用来区分order_id和shipping notes是从哪里获取到的文本 if not has_text: log.info("执行成功:ORC程序没有获取到文本信息") self.clear_folder() log.info("执行成功:清空已完成遍历的PDF图片文件") # 将文本生成的text和图片OCR识别到的text合并为一个 merged_text = extracted_text + extracted_image_text merged_text = merged_text.replace(" ", "").replace("\n", "") log.info("执行成功:提取到PDF和图片合并文本信息") return merged_text
适用场景:
想通过打印面单上面的文字是否存在,或者系统生成的pdf是否包含自己自定义的文字内容。
实现目标:
通过以上代码实现:当没有pdf路径时创建自动创建,再之前的步骤中已在路径下生成了pdf临时存在本地的指定文件夹路径下。
1.然后打开pdf,首先判断pdf中是否存在文本值,如果存在则打上标记。
2.获取pdf中所有的图片个数,然后将其按照 if pix.n - pix.alpha的方式判断是否格式可以存为png。
3.添加图片尺寸验证,防止图片过小。
4.pytesseract.image_to_string将图片转为文字,遍历所有图片将所有的文字合并返回结果。
部分调试:
(图片获取结果)
(图片转为text)
相关推荐
- apisix动态修改路由的原理_动态路由协议rip的配置
-
ApacheAPISIX能够实现动态修改路由(DynamicRouting)的核心原理,是它将传统的静态Nginx配置彻底解耦,通过中心化配置存储(如etcd)+OpenRest...
- 使用 Docker 部署 OpenResty Manager 搭建可视化反向代理系统
-
在之前的文章中,xiaoz推荐过可视化Nginx反向代理工具NginxProxyManager,最近xiaoz还发现一款功能更加强大,界面更加漂亮的OpenRestyManager,完全可以替代...
- OpenResty 入门指南:从基础到动态路由实战
-
一、引言1.1OpenResty简介OpenResty是一款基于Nginx的高性能Web平台,通过集成Lua脚本和丰富的模块,将Nginx从静态反向代理转变为可动态编程的应用平台...
- OpenResty 的 Lua 动态能力_openresty 动态upstream
-
OpenResty的Lua动态能力是其最核心的优势,它将LuaJIT嵌入到Nginx的每一个请求处理阶段,使得开发者可以用Lua脚本动态控制请求的生命周期,而无需重新编译或rel...
- LVS和Nginx_lvs和nginx的区别
-
LVS(LinuxVirtualServer)和Nginx都是常用的负载均衡解决方案,广泛应用于大型网站和分布式系统中,以提高系统的性能、可用性和可扩展性。一、基本概念1.LVS(Linux...
- 外网连接到内网服务器需要端口映射吗,如何操作?
-
外网访问内网服务器通常需要端口映射(或内网穿透),这是跨越公网与私网边界的关键技术。操作方式取决于网络环境,以下分场景详解。一、端口映射的核心原理内网服务器位于私有IP地址段(如192.168.x.x...
- Nginx如何解决C10K问题(1万个并发连接)?
-
关注△mikechen△,十余年BAT架构经验倾囊相授!大家好,我是mikechen。Nginx是大型架构的必备中间件,下面我就全面来详解NginxC10k问题@mikechen文章来源:mikec...
- 炸场!Spring Boot 9 大内置过滤器实战手册:从坑到神
-
炸场!SpringBoot9大内置过滤器实战手册:从坑到神在Java开发圈摸爬滚打十年,见过太多团队重复造轮子——明明SpringBoot自带的过滤器就能解决的问题,偏偏要手写几十...
- WordPress和Typecho xmlrpc漏洞_wordpress主题漏洞
-
一般大家都关注WordPress,毕竟用户量巨大,而国内的Typecho作为轻量级的博客系统就关注的人并不多。Typecho有很多借鉴WordPress的,包括兼容的xmlrpc接口,而WordPre...
- Linux Shell 入门教程(六):重定向、管道与命令替换
-
在前几篇中,我们学习了函数、流程控制等Shell编程的基础内容。现在我们来探索更高级的功能:如何控制数据流向、将命令链接在一起、让命令间通信变得可能。一、输入输出重定向(>、>>...
- Nginx的location匹配规则,90%的人都没完全搞懂,一张图让你秒懂
-
刚配完nginx网站就崩了?运维和开发都头疼的location匹配规则优先级,弄错顺序直接导致500错误。核心在于nginx处理location时顺序严格:先精确匹配=,然后前缀匹配^~,接着按顺序正...
- liunx服务器查看故障命令有那些?_linux查看服务器性能命令
-
在Linux服务器上排查故障时,需要使用一系列命令来检查系统状态、日志文件、资源利用情况以及网络状况。以下是常用的故障排查命令,按照不同场景分类说明。1.系统资源相关命令1.1查看CPU使...
- 服务器被入侵的常见迹象有哪些?_服务器入侵可以被完全操纵吗
-
服务器被入侵可能会导致数据泄露、服务异常或完全失控。及时发现入侵迹象能够帮助你尽早采取措施,减少损失。以下是服务器被入侵的常见迹象以及相关的分析与处理建议。1.服务器被入侵的常见迹象1.1系统性能...
- 前端错误可观测最佳实践_前端错误提示
-
场景解析对于前端项目,生产环境的代码通常经过压缩、混淆和打包处理,当代码在运行过程中产生错误时,通常难以还原原始代码从而定位问题,对于深度混淆尤其如此,因此Mozilla自2011年开始发起并...
- 8个能让你的Kubernetes集群“瞬间崩溃”的配置错误
-
错误一:livenessProbe探针“自杀式”配置——30秒内让Pod重启20次现象:Pod状态在Running→Terminating→CrashLoopBackOff之间循环,重启间隔仅...
你 发表评论:
欢迎- 一周热门
- 最近发表
-
- apisix动态修改路由的原理_动态路由协议rip的配置
- 使用 Docker 部署 OpenResty Manager 搭建可视化反向代理系统
- OpenResty 入门指南:从基础到动态路由实战
- OpenResty 的 Lua 动态能力_openresty 动态upstream
- LVS和Nginx_lvs和nginx的区别
- 外网连接到内网服务器需要端口映射吗,如何操作?
- Nginx如何解决C10K问题(1万个并发连接)?
- 炸场!Spring Boot 9 大内置过滤器实战手册:从坑到神
- WordPress和Typecho xmlrpc漏洞_wordpress主题漏洞
- Linux Shell 入门教程(六):重定向、管道与命令替换
- 标签列表
-
- python计时 (73)
- python安装路径 (56)
- python类型转换 (93)
- python进度条 (67)
- python吧 (67)
- python的for循环 (65)
- python格式化字符串 (61)
- python静态方法 (57)
- python列表切片 (59)
- python面向对象编程 (60)
- python 代码加密 (65)
- python串口编程 (77)
- python封装 (57)
- python写入txt (66)
- python读取文件夹下所有文件 (59)
- python操作mysql数据库 (66)
- python获取列表的长度 (64)
- python接口 (63)
- python调用函数 (57)
- python多态 (60)
- python匿名函数 (59)
- python打印九九乘法表 (65)
- python赋值 (62)
- python异常 (69)
- python元祖 (57)