百度360必应搜狗淘宝本站头条
python类型转换python串口编程python计时python异常python进度条
当前位置：网站首页 > 技术资源 > 正文

python怎么爬图片

off999 2024-12-03 00:11 25 浏览 0 评论

学完了爬网页中的文本，今天我们来试着学习爬图片。目标网址：http://www.netbian.com/ 我们的目标就是爬取这些壁纸

打开网址 查看网页结构

用火狐浏览器打开链接 F12查看

由于我使用的pyquery

可以看到图片的链接 都在img标签的src属性中 我们只要通过pyquery锁定到这个img标签 就可以继续下一步了

我们先来尝试抓取一页的壁纸试试看

下面是具体的代码:

#!/usr/bin/env python

# -*- coding: utf-8 -*-

# @Time : 2018/10/31 17:54

# 爬取图片

import requests

from pyquery import PyQuery as pq

import time

headers = {

'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_4) AppleWebKit/537.36 '

'(KHTML, like Gecko) Chrome/52.0.2743.116 Safari/537.36'

}

# 这里我使用了代理 你可以去掉这个代理IP 我是为了后面大规模爬取做准备的

proxies = {

'https': '218.75.69.50:39590'

}

# 请求网页 获取源码

def start_request(url):

r = requests.get(url, headers=headers, proxies=proxies)

# 这个网站页面使用的是GBK编码 这里进行编码转换

r.encoding = 'GBK'

html = r.text

return html

# 解析网页 获取图片

def parse(text):

doc = pq(text)

# 锁定页面中的img标签

images = doc('div.list ul li img').items()

x = 0

for image in images:

# 获取每一张图片的链接

img_url = image.attr('src')

# 获得每张图片的二进制内容

img = requests.get(img_url, headers=headers, proxies=proxies).content

# 定义要存储图片的路劲

path = "F:\\image\\" + str(x) + ".jpg"

# 将图片写入指定的目录 写入文件用"wb"

with open(path, 'wb') as f:

f.write(img)

time.sleep(1)

print("正在下载第{}张图片".format(x))

x += 1

print("写入完成")

def main():

url = "http://www.netbian.com"

text = start_request(url)

parse(text)

if __name__ == "__main__":

main(）

以上就是python怎么爬图片的详细内容，更多请关注其它相关文章！

更多技巧请《转发 + 关注》哦！

相关推荐

海马苹果助手官方下载（海马苹果助手官方正版）

除了官方版，苹果其他服务器互通吧好像，只是不能换服务器登录你好；根据你的提示，可能是你的手机系统不正常蚂蚁浏览器，你可以现在一个手机QQ浏览器，它的体积小，功能强大，还特别的节省流量，它使用自主研发的...

wifi恢复出厂设置后上不了网

恢复出厂设置后，路由器的网络设置也被清空了，需要重新设置账号和密码等信息并配置网络。还需要确认路由器的网线连接是否正确，以及是否有其他网络设备干扰。 如果重新配置还是连不上网不能用，可能需要...

联想笔记本蓝屏怎么解决（联想笔记本蓝屏怎么解决方法）

回答如下：如果您的联想笔记本电脑出现蓝屏问题，可以尝试以下解决方法：1.重启电脑：尝试简单的重启电脑，看是否可以解决问题。2.检查硬件：检查您的笔记本电脑是否有硬件故障。例如，您可以拔下所有外接设...

微星显卡型号档次梯队（微星显卡大全）

2019年微星新出的显卡主要系列划分：VENTUS（万图师）：入门级版本，也有人说是丐版，用料一般。ARMOR（装甲师）：中低版本，做工用料主流，比丐版强一点。DUKE（暗黑龙爵）：中等版本，做工用料...

腾达扩展器a12设置（腾达扩展器设置方法）

1、检查扩展器的WiFi是否正确无线扩展器连接的是上端的WiFi，然后再转发出新的WiFi。所以，必须要知道正确的上端WiFi信息，比如WiFi名称和密码。解决方法：用手机连接上端WiFi，登录到这个...

手机文件彻底删除如何恢复（手机里文件删了怎么恢复）
  • 手机文件彻底删除如何恢复（手机里文件删了怎么恢复）
  • 手机文件彻底删除如何恢复（手机里文件删了怎么恢复）
  • 手机文件彻底删除如何恢复（手机里文件删了怎么恢复）
  • 手机文件彻底删除如何恢复（手机里文件删了怎么恢复）
win7 旗舰版32位密钥（win7旗舰版密钥32位激活不了）

可以win7旗舰版32位产品密钥：1、TG664-TJ7YK-2VY3K-4YFY6-BCXF4；2、MVG64-RQDVY-KB9RM-MX9WT-MW824；3、TDTY2-6HJ49-46PCK...

win7下安装ghostxp（win7安装方法ghost）

在win7家庭版电脑中安装虚拟xp系统方法：1.首先安装windows6.1-kb958559-x86-refreshpkg补丁。2.安装完成后，需要重启电脑。3.重启电脑，再安装windowsxpm...

电脑怎么锁屏快捷键（暂时离开电脑怎么锁屏快捷键）

计算机锁屏的快捷键在不同的操作系统上可能会有所不同，但在Windows系统中通常是“Windows键+L”组合键。当您按下这个组合键时，计算机会立即锁定屏幕，需要输入密码才能解锁。这个快捷键可以方便地...

microsoft+teams+meeting怎么加入会议

teams手机点击加入会议没有反应原因和解决方法如下：1.时区不对，把电脑屏幕右下角时区调整好即可进入TeamsPC版。2.会议主办方的问题。3.MicrosoftTeams客户端的大多数问题都...

笔记本怎么设置wifi（笔记本怎么设置wifi密码）

笔记本电脑连接无线网络的具体设置步骤如下:1.打开电脑上的无线网络连接功能。在电脑屏幕下方中央区域找到网络连接图标,通常是两个悬挂的屏幕,点击打开。2.在网络连接列表中找到无线选项。一般无线选项图...

键盘所有按键都没反应（键盘无反应,鼠标正常）

台式机键盘失灵可以按以下四步来解决：1、重新插键盘与主机连接接口。有可能因为接口的接触不良导致的键盘失灵，这时可以对插头进行拔插，注意：如果是USB接口，可以直接插拔，而如果是圆形接头最好关机后再操作...

手机win10主题下载（手机windows11主题）

前面三位的方法都太复杂，还要找用户名什么。下面软件就搞定了，还可以自动提取Win10主题包里的壁纸。网页链接在软件上右键：一键打开主题目录，一键打开壁纸目录如果要提取主题包里的Win10壁纸，只要把主...

手机360助手有用吗

360手机助手是一款Android手机应用市场，由著名的安全软件厂商奇虎360公司开发和维护。它提供了丰富的应用程序下载、游戏下载、主题壁纸等资源，并且具备一定的应用管理和手机优化功能。360手机助手...

电脑主机频繁启动但启动不了

这个情况有可能是内存条换了，我上次就是这个情况，不知道怎么把内存条给烧了，然后它一給它插上电源就反复重启，刚一打开就自己又关上了反反复复。还有一次是因为这个电脑主机的电源插座的线换了，那个插头的口给烧...

取消回复欢迎 你 发表评论:

一周热门
最近发表
标签列表
Copyright Your WebSite.Some Rights Reserved.