首页 > 脚本专栏 > python > python爬虫操作requests和etree

关于python简单的爬虫操作(requests和etree)

作者:IT之一小佬

这篇文章主要介绍了关于python简单的爬虫操作(requests和etree),文中提供了实现代码,需要的朋友可以参考下

虎扑体育-NBA球员得分数据排行 第1页

示例代码:

import requests
from lxml import etree
url = 'https://nba.hupu.com/stats/players'
headers = {
    "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/109.0.0.0 Safari/537.36"
res = requests.get(url=url, headers=headers)
print(res)
# 处理请求结果
e = etree.HTML(res.text)
# 解析响应的数据
player = e.xpath('//*[@id="data_js"]/div[4]/div/table/tbody/tr/td[2]/a/text()')
team = e.xpath('//*[@id="data_js"]/div[4]/div/table/tbody/tr/td[3]/a/text()')
hit_rate = e.xpath('//*[@id="data_js"]/div[4]/div/table/tbody/tr/td[6]/text()')[1:]
score = e.xpath('//*[@id="data_js"]/div[4]/div/table/tbody/tr/td[4]/text()')[1:]
for p, t, h, s in zip(player, team, hit_rate, score):
    print(f"队员:{p},球队:{t},命中率:{h},得分:{s}")

运行结果:

到此这篇关于关于python简单的爬虫操作(requests和etree)的文章就介绍到这了,更多相关python爬虫操作requests和etree内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

您可能感兴趣的文章:
  • 最新anaconda安装配置教程
    最新anaconda安装配置教程
    2023-04-04
  • python在指定位置插入字符的实现
    python在指定位置插入字符的实现
    2023-04-04
  • 深入理解python 生成器、迭代器、动态新增属性及方法
    深入理解python 生成器、迭代器、动态新增属性及方法
    2023-04-04
  • 关于python简单的爬虫操作(requests和etree)
    关于python简单的爬虫操作(requests和etree)
    2023-04-04
  • Python采集王者皮肤图片实战示例
    Python采集王者皮肤图片实战示例
    2023-04-04
  • 关于使用python对mongo多线程更新数据
    关于使用python对mongo多线程更新数据
    2023-04-04
  • 如何将python文件打包成exe可运行文件
    如何将python文件打包成exe可运行文件
    2023-04-04
  • 美国设下计谋,用娘炮文化重塑日本,已影响至中国
    美国设下计谋,用娘炮文化重塑日本,已影响至中国
    2021-11-19
  • 时空伴随者是什么意思?时空伴随者介绍
    时空伴随者是什么意思?时空伴随者介绍
    2021-11-09
  • 工信部称网盘企业免费用户最低速率应满足基本下载需求,天翼云盘回应:坚决支持,始终
    工信部称网盘企业免费用户最低速率应满足基本下载需求,天翼云盘回应:坚决支持,始终
    2021-11-05
  • 2022年放假安排出炉:五一连休5天 2022年所有节日一览表
    2022年放假安排出炉:五一连休5天 2022年所有节日一览表
    2021-10-26
  • 电脑版 - 返回首页

    2006-2023 脚本之家 JB51.Net , All Rights Reserved.
    苏ICP备14036222号