解决Excel单元格中回车符与换行引发的导入数据错行问题
off999 2024-10-05 19:45 27 浏览 0 评论
本人直男+工科男一枚,不是技术大拿,也写不出华丽的辞藻和优美的文章形态,只想分享自己如何解决工作中遇到的问题,希望可以帮到同样遇到这些问题的童鞋们,也算是记录下自己探索过程中的点点滴滴。
背景:
把业务系统中导出的原始数据导入数据仓库时,发现数据出现错行,或出现空值列,猜想应该是什么神奇的字符导致。
查找原因:
Excel中定位到发生错行的位置,复制单元格内容到VS Code中发现首尾出现了西文双引号,如下图
当时傻傻地以为,双引号?好办啊,ctrl+h替换成空就好了呗,结果呢,只怪我太草率,单元格中用于表示说话内容的正常的双引号都被抹掉,而图中这“两位”的身影依然倔强的存在。
继续仔细凝视这段文字,发现有个换行,也就是单元格内换行,你问我咋看出来的?因为VS Code不会给自动换行的这一行添加行号。有人会说这么明显我一眼就看出来了,我这里的截图只是个例子,实际的情况是一个单元格有上百个字符,有时几乎是把邮件内容完全粘贴过来,而一份数据有几千行,在密密麻麻的文字中肉眼很难区分出来换行的存在。
手动去掉换行后,发现双引号的身影终于消失了,试着导入数据库也不再发生错行,ok,看来这就是问题所在了。
治疗过程:
ctrl+h肯定是不行了,也不能在几千行数据中手动删除换行符,还好excel提供了用来清理特殊字符的clean函数,这函数就一个参数:需要清理的单元格地址,比如=clean(A2),然后那些奇奇怪怪的特殊字符就都被去掉了。
因为最近在自学Python,所以想是不是可以做到同样的效果,并且还能帮我进行简单的数据清洗,比如统一中西文标点,去掉首尾空格什么的。
以下是实现替换功能的Python代码,使用replace方法来实现,其中df是通过pandas引入的Excel数据集,column是目标列,\r是回车符,\n是换行符:
df['column'] = df['column'].str.replace('\r','').str.replace('\n','')如果使用alt+enter在单元格中换行,那么只会有\n,因为我遇到的不仅有手动输入的文本,也有从其他业务系统中直接导出的数据,查看df具体内容的时候,发现会存在\r\n的情况,所以上面的代码中我把这两种情况都替换了。
探讨下Windows中的回车符与换行符,一直认为回车与换行是一回事,因为按一下键盘的Enter,光标就到下一行并且回到行首,但实际并不是这么简单,按下Enter会触发两个动作,回车与换行,回车的英文是return (\r),仅让光标回到当前行的最左侧,没有下移一行的作用,换行的英文是newline(\n),让光标在当前位置下移一行,但没有重置光标到行最左侧的作用,所以在Windows中换行是通过\r\n实现,并且两个的先后顺序不能改变。
Unix和Linux中使用\n表示回车与换行,Mac中使用\r表示回车与换行。
这里有个小疑问,为什么Excel的单元格内换行只显示\n,而不是\r\n,是因为alt+enter代表软回车,直接按下Enter才显示为\r\n?还请高手来指点哈,谢谢:)
相关推荐
- 电脑怎么设置到点自动关机(电脑怎样设置到点关机)
-
1、首先我们点击电脑屏幕左下角的开始按钮,在所有程序里依次选择附件---系统工具,接着打开任务计划程序。2、我们打开任务计划程序后,在最右边的操作框里选择创建基本任务,然后在创建基本任务对话框的名称一...
- 2025年笔记本电脑排行榜(20201年笔记本电脑推荐)
-
2023华为笔记本电脑matebook16系列很好用的。因为这个系列她是有非常好的性价,比的是能够让你有非常轻薄的厚度,并且能够有11.6寸的屏幕,而且还有120赫兹的刷新率作为大学生,您可能需要经常...
- powerpoint激活密钥(ppt密钥 激活码2010)
-
1/4进入文件打开一个PPT文件进入到软件界面,在界面左上方找到文件选项,点击该选项进入到文件页面。2/4点击账户文件页面中,页面左侧找到账户选项,点击该选项,页面右侧会出现相应的操作选择。3/4点击...
-
- qq恢复删除好友官网(qq恢复已删好友)
-
qq恢复官方网站,http://huifu.qq.com/1、什么是QQ恢复系统?QQ恢复系统是腾讯公司提供的一项找回QQ联系人、QQ群的服务,向所有QQ用户免费开放。2、QQ恢复系统能恢复多长时间内删除的好友?普通用户可以申请恢复3个月内...
-
2025-12-28 16:03 off999
- 优启通u盘重装win7系统教程(优启通u盘装win7系统教程图解)
-
系统显示未找到万能驱动的解决方法是:1、重插下usb口1、造成“找不到驱动器设备驱动程序”的原因,可能是usb口出现问题。2、换个usb口可能是单独这个usb口出现问题,可以选择另外的usb口重试wi...
- wifi加密方式怎么设置(wifi网络加密怎么设置)
-
若你想将自己的无线网改成加密的,可以按照以下步骤操作:1.打开你的路由器管理界面。一般来说,在浏览器地址栏输入“192.168.1.1”或“192.168.0.1”,然后输入用户名和密码登录就可以打...
- sql数据库自学(数据库入门必看——《sql基础教程》)
-
SQLServer数据库基础知识:1.数据库是由数据组成的,这些数据可以被组织成有序的数据结构,以支持特定的应用程序。2.数据库管理系统(DBMS)是一种软件工具,用于创建、管理和操作数据库。...
- 无线网连接不可上网怎么回事
-
可能有几下几方面原因:1、无线路由器网络参数设置错误,无法拨通ISP运营商的局端设备,无法接入互联网;2、宽带线路出现故障,路由器无法拨通ISP运营商的局端设备,无法连通;3、宽带DNS服务器由于某种...
- 恢复大师app下载(恢复大师app下载软件)
-
是真的。开心手机恢复大师是一款苹果手机数据恢复软件,可以恢复删除的微信聊天记录、短信、通讯录、备忘录、qq聊天记录等17种数据。我测试了一下,确实是可以恢复的。而且开心手机恢复大师是可以免费试用的,是...
- windowsxp下载网站(windows xp download)
-
目前无法下载因为红色警戒XP电脑版是一款已经停止开发的游戏,官方已经停止了对其的支持和更新。虽然网上有一些模拟器可以运行该游戏,但是安装和使用相对困难,而且可能存在版权问题。建议玩家选择其他同类型的游...
- 没人用过的激活码没过期(没人用过的激活码没过期可以用吗)
-
迷你世界并不存在什么激活码的。《迷你世界》是一款高度自由的休闲类3D沙盒游戏,有着非常方便快捷的多人联机模式,只要有网络就能和各个地方的小伙伴们一起玩。这里没有等级和规则限制,没有规定的玩法,只有随心...
- 2017年联想笔记本电脑有几款
-
17年的笔记本电脑可以勉强安装一下win10系统试试。关键看你的内存有多少,内存大于4个G的话可以安装win10速度不会太慢。最好是安装win7系统,这样能发挥你这台电脑的所有的性能,你用起来也会感觉...
欢迎 你 发表评论:
- 一周热门
-
-
抖音上好看的小姐姐,Python给你都下载了
-
全网最简单易懂!495页Python漫画教程,高清PDF版免费下载
-
Python 3.14 的 UUIDv6/v7/v8 上新,别再用 uuid4 () 啦!
-
飞牛NAS部署TVGate Docker项目,实现内网一键转发、代理、jx
-
python入门到脱坑 输入与输出—str()函数
-
宝塔面板如何添加免费waf防火墙?(宝塔面板开启https)
-
Python三目运算基础与进阶_python三目运算符判断三个变量
-
(新版)Python 分布式爬虫与 JS 逆向进阶实战吾爱分享
-
失业程序员复习python笔记——条件与循环
-
系统u盘安装(win11系统u盘安装)
-
- 最近发表
- 标签列表
-
- python计时 (73)
- python安装路径 (56)
- python类型转换 (93)
- python进度条 (67)
- python吧 (67)
- python的for循环 (65)
- python格式化字符串 (61)
- python静态方法 (57)
- python列表切片 (59)
- python面向对象编程 (60)
- python 代码加密 (65)
- python串口编程 (77)
- python封装 (57)
- python写入txt (66)
- python读取文件夹下所有文件 (59)
- python操作mysql数据库 (66)
- python获取列表的长度 (64)
- python接口 (63)
- python调用函数 (57)
- python多态 (60)
- python匿名函数 (59)
- python打印九九乘法表 (65)
- python赋值 (62)
- python异常 (69)
- python元祖 (57)
