百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术资源 > 正文

Python自动化:破解Excel模糊匹配难题:秒杀Vlookup,一键匹配

off999 2024-11-24 20:04 24 浏览 0 评论


摘要: Excel的Vlookup函数在面对多人输入、格式不一的数据时显得力不从心,尤其是模糊匹配功能几乎毫无建树。Python自动化办公如何成为你的模糊匹配救星?跟随小李的实战案例,一起见证技术的力量!


引言

在数据的海洋中,微信公众号粉丝小李曾是一名孤独的航行者。作为一家知名企业的数据分析师,他每月都要处理成千上万的Excel数据,尝试从中找出匹配项。然而,当数据经过多道工序、多个人手时,格式的不一致性,数据准确性不高成了他最大的难题,因为这时他需要用到模糊匹配,而Excel的Vlookup函数的模糊匹配功能几乎为零。

1.小李的挑战

近期,小李就遇到了这样一个挑战:需要匹配两个Excel表中的数据,但这些数据是多个人经手的,格式和准确性存在较大的差异。具体来说,匹配列的数据非常相近却又不同,比如同一数据在一个表里是“Solid carbon tipUltra light Spinn 195 Up to 35g Light FAST”,在另一个表里就变成了“Ultra light Spinn Solid carbon tip 195 Up to 35g FASTLight”。也就是数据的基本元素是相同的,只不过是字符顺序、大小写、空格不尽相同,面对这样的问题,传统的Vlookup方法显然无法满足需求。

2.Excel Vlookup函数的局限

Vlookup虽然提供了精确匹配和模糊匹配两种功能,但在处理大小写、空格以及字符顺序等方面无法进行规则自定义,往往难以得到准确的结果。如下图所示,精确匹配很多结果没有匹配出来,模糊匹配的匹配结果直接就是错误的,小李需要一种新的方法来解决这个问题。

3.Python自动化的解决方案

Python自动化办公工具的出现,为小李提供了更加灵活和强大的数据处理能力。通过编写自定义的模糊匹配规则,我们可以轻松实现对大小写、空格以及字符顺序的忽略,从而实现精确的数据匹配。

import pandas as pd  




import re  

  

# 读取两个Excel文件  

df2 = pd.read_excel('test1.xlsx')  

df1 = pd.read_excel('test2.xlsx')  

  

# 定义一个函数来预处理字符串,以忽略大小写、空格和字符顺序  

def preprocess_string(s):  

    # 转换为小写  

    s = s.lower()  

    # 移除多余的空格  

    s = re.sub(r'\s+', ' ', s).strip()  

    # 分割字符串为字符列表,然后排序  

    s = ''.join(sorted(s))  

    return s  

  

# 对df1和df2中需要匹配的列进行预处理  

df1['column_to_match_processed'] = df1['desc'].apply(preprocess_string)  

df2['column_to_match_against_processed'] = df2['desc'].apply(preprocess_string)  

  

# 创建一个空列来存储匹配结果  

df1['matched_data'] = None  

  

# 遍历df1,尝试在df2中找到匹配项  

for index, row in df1.iterrows():  

    processed_string = row['column_to_match_processed']  

    matches = df2[df2['column_to_match_against_processed'] == processed_string]  

    if not matches.empty:  

        # 假设每个处理后的字符串在df2中只匹配一次,取第一个匹配项  

        df1.at[index, 'matched_data'] = matches['Volumn'].iloc[0]  # 假设'data_column'是df2中你想要匹配的数据列名  

    else:  

        # 如果没有找到匹配项,可以保持为None或者设置为其他默认值  

        pass  

  

# 移除预处理列(如果需要)  

df1 = df1.drop(columns=['column_to_match_processed'])  

  

# 保存结果到新的Excel文件  

df1.to_excel('matched_data.xlsx', index=False)

4.效果展示

使用我们的脚本,小李现在可以在几秒钟内完成之前需要数天的工作。这个自动化工具不仅提高了效率,还减少了因手动操作导致的错误。

结语

Python自动化不仅仅是编程技巧的展示,更是一种工作方式的革新。它能够帮助我们从重复性劳动中解放出来,让我们有更多时间去做更有创造性的工作。小李的故事证明了自动化的力量,希望他的经历能够激励更多的人去探索和利用Python自动化办公的无限可能。


如果你也像小李一样,面临着数据分析的苦恼,或者对Python脚本的编写有任何疑问,欢迎在评论区留言,我们将为你提供一对一的技术支持!


尾注: 本文为原创技术文章,转载请标明出处。如果你喜欢本文,别忘了点赞、转发和关注我们的公众号,获取更多技术干货!

数海丹心

大数据和人工智能知识分享与应用

132篇原创内容

公众号



相关推荐

windows7屏幕亮度怎么调整(windows7屏幕亮度调节)

windows7屏幕亮度调节方法如下1.鼠标右键桌面空白处,在弹出的菜单中选择【个性化】。2.进入属性界面,选择左下角的【显示】选项。3.在弹出的显示页面右侧点击【调整亮度】。4.进入调整亮度页面,下...

永久删除的视频怎么找回(怎么恢复永久删除的视频)
  • 永久删除的视频怎么找回(怎么恢复永久删除的视频)
  • 永久删除的视频怎么找回(怎么恢复永久删除的视频)
  • 永久删除的视频怎么找回(怎么恢复永久删除的视频)
  • 永久删除的视频怎么找回(怎么恢复永久删除的视频)
xpsp2系统下载地址(windows xp sp2 iso)

WindowsXPProfessionalSP2产品密钥是微软公司的一个软件密钥,用于授权用户使用该软件的完整功能。它通常与产品许可证一起使用,用于确保软件的合法性和安全性。使用Windows...

开机microsoft登录不上

1、系统问题:如果系统版本比较低,可能会由于旧系统存在某些BUG未修复或业务功能未优化,使手机在使用APP等应用过程中出现卡的情况,建议更新到最新的ios系统使用。2、内存问题:如果内存比较小,在运行...

如何取消win10开机密码(如何取消win10开机密码账户登录)

取消Windows10的开机密码可以通过以下方法进行操作:方法一:使用用户账户设置1.打开“开始”菜单,点击“设置”图标。2.在设置窗口中,点击“帐户”选项。3.在左侧菜单中,选择“登录选项”。4....

免费解压文件的软件(免费解压文件的软件电脑)

1、快压快压(kuaizip)是一款非常流氓的压缩和解压缩软件,一款免费、方便、快速的压缩和解压缩利器,拥有一流的压缩技术,是国内第一款具备自主压缩格式的软件。快压自身的压缩格式KZ具有超大的压缩比和...

无线usb网卡插上去没有反应(为什么usb无线网卡插上去没反应)

当出现电脑无法识别无线网卡的情况时,是简单的方法就是将无线USB网卡插到电脑后置USB接口上,以保证供电的充足。当然如果是偶然出现无法识别的情况,建议重启一下电脑试试。启用USB无线网卡驱动:右击“计...

怎么登录自己家的路由器(怎么登录自己家的路由器账号)

登陆家里的路由器方法:1、先查看ip,方法:win+r---输入:cmd---在再黑白界面输入:ipconfig,按回车。2、根据网关查看路由器地址。若网关是:192.168.2.1,那么路由器的ip...

linux操作系统安装步骤(linux系统详细安装步骤)

1.选择“中文(简体)”,然后点击“安装Ubuntu”。2.点击“继续”。3.然后点击“现在安装”。4.选择地址的时区,然后点击“继续”。5.选择“汉语”,然后点击“继续”。6.输入用户的名字。7.设...

苹果手机怎么设置定时关机(苹果手机怎么设置定时关机重启)

苹果手机可以设置定时关机,但无法设置定时开机。具体操作步骤如下:进入苹果手机自带的时钟。点击屏幕有下角的计时器。点击画面中间的计时结束启用选项。选择画面最下方的“停止播放”。之后再点击画面右上角的设定...

无线网wifi密码忘记了怎么办

忘记wifi密码后,可以在路由器后台查看。1.在浏览器的地址栏中,输入路由器上的管理地址,进入后台界面;2.在后台界面里,找到“无线设置”选项,点击它;3.在新界面里,点击wifi密码右侧的小眼睛图标...

win7系统无法正常开机怎么办
win7系统无法正常开机怎么办

解决方法如下1,出现无法启动的原因,要注意是开机启动不了,还是在进度条那里缓冲,过不去.如果是开机启动不了,那就要看一下内存条、电源等有没有问题?如果是在进度条那里,那就看下方的三种方法。2,第一种方法:1,开机按F8键.2,选择最近一次的...

2025-11-16 07:51 off999

现在装win7还需要激活吗(现在安装win7旗舰版还需密钥吗)

要激活  Windows7如果是预装在计算机中的,买来之后便不用激活,这里预装指的是在厂商那里。正版的Windows7安装到计算机中,有三十天的试用期,若要永久使用,就要使...

2025显卡性能排行榜天梯图(2020年显卡性能天梯图)

MacBookPro的显卡水平处于笔记本独立显卡Nvidia920M和940M之间。属于低端显卡级,玩玩LOL啥的还可以,其他的大型游戏就算了,MAC不适合打游戏。MacBookPro搭载的8代...

网络对时服务器(对时服务器端口)

对等网是指在网络中所有计算机的地位都是平等的,既是服务器也是客户机,所有计算机中安装的都是相同的单机操作系统如Windows98/XP/Vista/7等,它可以设置共享资源,但受连接数限制,一般是只允...

取消回复欢迎 发表评论: