一学就会一用不废系列:如何用Python获取NBA历史数据
off999 2024-11-27 18:50 39 浏览 0 评论
入手Python后却不知道怎么拿来用，本篇文章将带你用Python来快速批量获取数据。
处理目标：用Python获取NBA历史得分排名前500的历史球星及得分数据。
前期准备：电脑安装Python，Pycharm软件（其他类似可视化处理界面，方便编程）
目标网站：http://stat-nba.com/（一个非常全面的NBA数据记录网站）
准备完成后，下面就开始我们的数据获取工作：首先，第一步泡一壶茶，或者倒一杯咖啡（非必要步骤[狗头]），废话不说，言归正传，正式开始处理步骤。
首先，打开pycharm，新建项目，写好项目名称地址等基本信息。
本次数据获取过程中需要使用requests模块、网页文本解析模块etree、csv模块。所以在脚本文件中加入所需的模块。
pycharm构建的项目只提供了基础的模块内容，所以我们还需要在设置-设置-Python解析器中导入我们所需要的模块。
然后通过浏览器打开我们的目标网址：http://stat-nba.com/query.php?page=0&QueryType=all&AllType=season&AT=tot&crtcol=pts&order=1#label_show_result
网址信息中我们主要用到的信息主要是page信息，用来标识目标网址的页数。设置好页数之后，右键点击检查查看目标网页的原始代码。找到姓名节点及分数节点。
在完成以上准备后，在脚本文件中编辑requests.get请求，主要包括url及请求的hearder信息。在url中定义一个用来控制当前页码的变量currentPage，自动获取时用来控制数据获取数量。
请求后的本档解析使用etree.HTML函数。
再次回到解析的网页，分析发现用来控制表格数据的节点采用类来控制，例如：姓名所属的类为"normal player_name_out change_color col1 row*"，得分所在的类为"current pts change_color col22 row *'"，同时通过row的标号来标识排名编号，每页默认为20行（0-19）。
所以再次回到脚本文件，设置解析的表达式对数据进行解析，通过currentRow变量来存储当前排名位置。
最后，通过while加for循环的方式批量下载数据，并保存为csv文档。
完成之后就可以随意处理数据了。[狗头][狗头]
文/挽风行
相关推荐
- 找不到ie浏览器怎么办（ie浏览器电脑里找不到）
-
首先我们打开“开始”菜单，看看菜单左面里有没有ie浏览器，或者直接在“所有程序”的位置，搜索“internet”，看看能不能找到我们的ie浏览器。若是可以找到这个程序，直接使用鼠标的右键，在菜单中找到...
- 以太网未连接怎么解决（怎么把以太网改成wifi）
-
1.IP地址设置是否有效按setting，选择网络，设置IP地址和网关。测量仪器应与PC机处于同一个网段，跨网段搜索连接可能会失败，若PC机IP：192.168.4.XXX，测量仪器IP地址和网关也应...
- win7如何进入bios界面（Win7如何进入bios界面）
-
在Win7开机时进入BIOS设置是通过按下特定的按键来实现的。不同的计算机品牌和型号可能需要不同的按键组合来进入BIOS设置，请注意电脑启动时屏幕上的提示信息，通常会显示要使用哪个按键来进入BIOS。...
- 装机配置表（装机配置表格下载）
-
处理器+主板：I39100+技嘉B360M套装1179散热：九州风神玄冰40099显卡：核显内存：金士顿dr426668G279固态：三星250GB860EVO(SATA3.0)33...
- apple id怎么找回密码（Apple ID怎么找回密码没有苹果手机）
-
可以用ID找回密码。因为在注册Apple账号时必须要添加邮箱或手机号码，所以当忘记密码时，可以通过输入该账号的邮箱或手机号码来找回密码。具体步骤为：在登录页面点击“忘记密码”，选择“使用其他方式找回”...
- 电脑磁盘受损怎样修复（电脑磁盘损坏）
-
方法一：一般问题修复 1.硬盘坏常的现象是开机或运行时容易蓝屏，但还是能进系统。这个问题一般比较的容易修复，主要是系统分区出问题了。我们打开DOS命令提示符窗口，输入命令“chkdskc:/f...
- mac地址在哪里查（mac地址在哪里查找啊）
-
查看电脑MAC地址的五种方法如下：方法一：通过命令提示符查看点击“开始”菜单，在“搜索程序和文件”输入框中输入“cmd”，然后回车。回车后，弹出命令符窗口，输入“ipconfig/all”，然后回车。...
- win10u盘系统盘制作（win10u盘做系统详细步骤）
-
要用U盘制作一个Windows10系统盘，您可以按照以下步骤进行操作：1. 准备一个至少8GB容量的U盘，并确保其中没有重要数据，因为制作系统盘会将U盘格式化。2.&n...
- 电脑怎么更新win10（电脑怎么更新浏览器）
-
windows10升级版本方法如下一、首先，打开要更新的电脑，进入win10系统，在桌面左下角点击“开始”按钮。二、然后，在“开始”菜单中点击“设置”点击打开。三、然后，在电脑设置中选择“更新与安全”...
- 联想电脑恢复出厂设置系统（联想系统恢复出厂系统）
-
1.打开电脑，鼠标点击屏幕左下角的【开始】图标，再点击【设置】图标。 2.进入【Windows设置】界面后，点击【更新和安全】-【恢复】。 3.点击【重置此电脑】下的【开始】按钮，根据需要选择【保...
- 手机版爱思助手app下载苹果版
-
第一步：我们先在电脑上安装好爱思助手，并且把手机与电脑连接起来； 第二步：在电脑上打开爱思助手以后，点击顶部的“软件资源”栏目； 第三步：随后在软件资源列表中即可看到“爱思助手”应用，点击...
- ie浏览器图标删除不了（ie浏览器从桌面无法删除）
-
方法一： 1、点击“开始”，在搜索中输入“gpedit.msc”回车打开注册表； 2、点击“用户配置-管理模板-桌面”左侧的下拉按钮； 3、单击”桌面“，右侧弹出桌面的设置栏； 4、双击“...
- bitlocker是什么意思（bitlocker属于什么锁）
-
Bitlocker的意思：驱动器加密；磁盘加密；硬盘加密。BitLocker驱动器加密它是在WindowsVista中新增的一种数据保护功能，主要用于解决一个人们越来越关心的问题：由计算机设备的物理...
- win10开机启动文件夹在哪里（电脑开机启动文件夹win10）
-
win7下：在运行里打入gpedit.msc然后回车。用户配置-〉管理模板-〉系统点击右边“只运行指定的windows程序”点击允许的应用程序列表显示按钮在里面添加需要运行的程序，...
- 如何升级win11专业版（升级win11专业版会删掉东西吗）
-
简单来说，目前升级到Windows11系统上，有三种常见方法：1、通过微软推送更新，从Windows更新升级。2、更新不求人，通过Win11更新助手升级。助手更新系统也非常简单省心。3、无视硬件限制...
欢迎 你 发表评论:
- 一周热门
-
-
抖音上好看的小姐姐，Python给你都下载了
-
全网最简单易懂!495页Python漫画教程，高清PDF版免费下载
-
飞牛NAS部署TVGate Docker项目，实现内网一键转发、代理、jx
-
Python 3.14 的 UUIDv6/v7/v8 上新，别再用 uuid4 () 啦!
-
python入门到脱坑 输入与输出—str()函数
-
宝塔面板如何添加免费waf防火墙?（宝塔面板开启https）
-
Python三目运算基础与进阶_python三目运算符判断三个变量
-
(新版)Python 分布式爬虫与 JS 逆向进阶实战吾爱分享
-
失业程序员复习python笔记——条件与循环
-
系统u盘安装（win11系统u盘安装）
-
- 最近发表
- 标签列表
-
- python计时 (73)
- python安装路径 (56)
- python类型转换 (93)
- python进度条 (67)
- python吧 (67)
- python的for循环 (65)
- python格式化字符串 (61)
- python静态方法 (57)
- python列表切片 (59)
- python面向对象编程 (60)
- python 代码加密 (65)
- python串口编程 (77)
- python封装 (57)
- python写入txt (66)
- python读取文件夹下所有文件 (59)
- python操作mysql数据库 (66)
- python获取列表的长度 (64)
- python接口 (63)
- python调用函数 (57)
- python多态 (60)
- python匿名函数 (59)
- python打印九九乘法表 (65)
- python赋值 (62)
- python异常 (69)
- python元祖 (57)