Numpy第21练:读取文件中的坑,只有理解才能避免!
off999 2024-11-14 16:52 26 浏览 0 评论
在第 20 练中我们了解了如何用numpy读取文本文件及其常用方法的介绍,但其实 Numpy读取文本文件里的细微门道还是挺多的,稍有不注意可能读取的数据就不是自己想要的,我们先来看一个具体的例子:
此时问题就来了,为什么使用dtype为None时得出的ndarray对象是一维的,而将dtype指定为U16时得出的ndarray对象又是二维的呢?
genfromtxt的内部操作
上面的这个疑问其实涉及到了genfromtxt函数如何处理和解析数据,以及dtype参数是如何影响最终数组结构的。
首先,np.genfromtxt是一个用于从文本文件加载数据并按指定格式转换为数组的函数。参数dtype决定了数组中元素的数据类型。当dtype=None时,numpy会尝试为每列数据推断出最合适的数据类型。
当dtype=None时:
在这种情况下,numpy会检查CSV文件中每一列的数据,并尝试为每一列确定一个合适的数据类型。这意味着输出数组中的每一行将会是一个结构化数组的元素,每一列成为结构化元素中的一个字段。因此,虽然物理上存储为一维数组,但逻辑上每个元素实际上包含了多个子元素(对应于原始数据的各个列),从而形成了类似于二维数据的结构。但是,整体来看,这个数组实际上是一维的,每个数组元素是一个复合类型(类似于Python中的元组),包含了不同列的数据。
当指定了特定的dtype(如U16)时:
在这种情况下,你是在告诉numpy将所有的数据都强制转换为指定的数据类型(在这里是长度为16的Unicode字符串类型)。因此,不管原始数据的类型如何,所有的数据都会被读取并转换为字符串。在这种情况下,numpy没有理由将数据读取为结构化数组,因为你已经指定了一个具体的、统一的数据类型。因此,它会生成一个二维数组,其中每行对应文件中的一行,每列对应行中的一个元素。
所以,dtype=None让numpy决定最合适的数据类型,通常会导致生成一个一维结构化数组,每个元素包含了多个数据字段。而指定特定的dtype(如U16)会导致numpy将所有数据读取为这种类型,从而生成一个普通的二维数组。
读取数据
在使用Numpy操作数据时,只要事先明确数组的shape,才能确定相应的数据访问方法,接下来我们设定一道练习题,那就是针对上面的一维数组和二维数组,如何只取第 5 列也就是最后一列的数据?
从上图可知,如果我们只看前 5 行数据,发现一维数组与二维数组的数据长的几乎是一样的,但如果我们只看第一行的数据,差别一下子就会显现出来:
如上图所示,一维数组d_None的每一行其实是一个Python的元组,而二维数组d_Unicode的每一行其实还是Numpy数组:
正是因为这种差别,如果我们只想访问最后一列的数据,对一维数据而言,因为它没有列的概念,所以在每一行中只能通过遍历的方式获取最后一个,而针对二维数组想要读取最后一列,一个切片操作就能搞定:
小结
本次练习主要是强调了dtype对Numpy的重要性以及其内部的类型推理机制,另外同样复习了Python及Numpy数组的切片操作。还是那句话,如果你也想进军 AI,一定要从这些基础的技能开始疯狂练习!
相关推荐
- vmospro虚拟机(vmospro虚拟机游戏闪退)
-
VMOSPRO可以用来运行多个安卓系统。因为VMOSPRO是一款虚拟机应用,可以在其中运行多个安卓系统,用户可以在不影响手机原系统的情况下,体验更多的安卓应用和功能。除了运行多个安卓系统外,VMO...
- 法国vs阿根廷(法国vs阿根廷决赛)
-
法国和阿根廷此前一共交手过12次,法国3胜3平6负。世界杯交手了3次,2胜1负。总体战绩法国还是处于下风的。最近一次交锋是2018世界杯八分之一决赛一场比赛中,欧洲劲旅法国队以4-3的比分击败了南美强...
- 百度手机助手下载2025官方正版
-
10年2012年参加的社会保险到2022年的参保对应月应该是整10年。我打个比方:某甲2012年10月份参加了社保,那么到了2022年10月份就是参加社保整整的10年。差不多十年左右吧。2022-20...
- 迅雷手机版高清在线(迅雷手机观看2018)
-
《海派甜心》是可米瑞智国际艺能有限公司出品的一部青春偶像剧。由林合隆执导,杨丞琳、罗志祥、李威主演。腾讯,爱艺奇上都可以观看
-
- itunes官方下载win7版(windows7下载itunes哪个版本)
-
itunes最新版本已经不支持win10以下系统了,很多商店标的支持win7只是没改,官网已经写的很清楚了,最低Windows10版本16299.0或更高版本。64位版本的Windows需要iTunes64位安装程序,4...
-
2026-01-16 22:15 off999
- 破解版传奇游戏无限内购破解版
-
1/6分步阅读首先,我们先去将游戏软件下载下来,点击页面底部位置的下载按钮,开始进行下载。2/6然后,我们在自己的手机桌面上找到已经下载安装完成好了的游戏软件,点击进入。3/6进入到选择登录方式这个页...
- 手机浏览器flash插件(5.4英寸的屏幕)
-
1、在手机的应用商店中,进入到搜索页面之后,输入“Adobeflashplayer”,然后点击搜索,找到就可以安装了2、第二个可以直接通过网页搜索Adobeflashplayer,一定要注意版...
- 最新卫星地图(最新卫星地图高清在线观看)
-
实时地球是中科遥感集团开发的中国卫星影像地图软件,被誉为中国版的“谷歌地球”。在线地球采用遥感集市云平台数据接口,每天动态更新高分辨率卫星影像,同时内置近年历史影像存档数据,所有影像免费开放浏览。用...
- 免费伴奏网(免费伴奏网址大全)
-
推荐下列5个伴奏网:99伴奏网这个网站提供有很多免费伴奏下载,包括男歌手伴奏,女歌手伴奏,组合伴奏,合唱伴奏,民歌伴奏,儿歌伴奏,改版伴奏,戏曲伴奏,婚礼伴奏等。免费伴奏–乱推网一个伴奏搜索下载网站,...
- 强力安卓恢复精灵(强力安卓恢复精灵是不是免费的)
-
您好,强力安卓恢复精灵是不可以恢复微信好友的。删除的好友不能像QQ好友有恢复找回功能,只有另外搜索添加。强力安卓恢复精灵挺好用的,在手机数据删除的时候还可以恢复,特别是将本人删除的微信聊天记录也恢复了...
- 电脑安装ktv点歌系统(怎么在电脑上安装ktv点歌)
-
在你的电脑上增加硬盘容量,用来装基本的歌曲库再在电脑上增加一个音视频输出设备,安装一套点歌系统就可以了。(1)硬盘容量大小根据您所需要歌曲的格式及数量来决定。以4分钟的MTV为例,一首DVD歌曲占用...
- 45到65岁大龄工招工(45到65岁大龄工招工女)
-
应该有。一般是服务行业,手工业。现在服务行业招不到年轻人,只有年纪大点的才肯应聘。家政公司招人一般会需要,养老机构也需要照顾老年人的人。传统手工业,只有年纪大的人会,必须招人,65岁也可以,特别是旅游...
- qq牧场手机版官方下载(qq牧场手机版官方正版下载)
-
建议进行以下操作:1.检查手机网络连接是否稳定,建议更换无线网络尝试。2.更新软件版本尝试。3.点击手机应用程序-设定-应用程序管理器-已下载-选择出现问题的应用-清除数据4.将数据备份(联系人,短信...
欢迎 你 发表评论:
- 一周热门
-
-
抖音上好看的小姐姐,Python给你都下载了
-
全网最简单易懂!495页Python漫画教程,高清PDF版免费下载
-
飞牛NAS部署TVGate Docker项目,实现内网一键转发、代理、jx
-
Python 3.14 的 UUIDv6/v7/v8 上新,别再用 uuid4 () 啦!
-
python入门到脱坑 输入与输出—str()函数
-
Python三目运算基础与进阶_python三目运算符判断三个变量
-
(新版)Python 分布式爬虫与 JS 逆向进阶实战吾爱分享
-
失业程序员复习python笔记——条件与循环
-
系统u盘安装(win11系统u盘安装)
-
Python 批量卸载关联包 pip-autoremove
-
- 最近发表
- 标签列表
-
- python计时 (73)
- python安装路径 (56)
- python类型转换 (93)
- python进度条 (67)
- python吧 (67)
- python的for循环 (65)
- python格式化字符串 (61)
- python静态方法 (57)
- python列表切片 (59)
- python面向对象编程 (60)
- python 代码加密 (65)
- python串口编程 (77)
- python封装 (57)
- python写入txt (66)
- python读取文件夹下所有文件 (59)
- python操作mysql数据库 (66)
- python获取列表的长度 (64)
- python接口 (63)
- python调用函数 (57)
- python多态 (60)
- python匿名函数 (59)
- python打印九九乘法表 (65)
- python赋值 (62)
- python异常 (69)
- python元祖 (57)
