当前位置:首页 > 篮球资讯 > 正文内容

Python爬取NBA虎扑球员数据

杏彩体育4年前 (2022-11-23)篮球资讯943

虎扑是一个认真而有趣的社区,每天有众多JRs在虎扑分享自己对篮球、足球、游戏电竞、运动装备、影视、汽车、数码、情感等一切人和事的见解,热闹、真实、有温度。

受害者地址

https://nba.hupu.com/stats/players

本文知识点:

系统分析网页性质结构化的数据解析csv数据保存

环境介绍:

python 3.6pycharmrequestscsv

爬虫案例的一般步骤

1.确定url地址(网页分析) 完成一半2.发送网络请求 requests(js\html\css)3.数据解析(筛选数据)4.保存数据(本地文件\数据库)

部分代码

导入工具

import requests # 第三方工具 import parsel # 数据解析工具 (css\正则表达式xpath) import csv

确定url地址(网页分析) 完成一半 (静态网页动态网页)

url = https://nba.hupu.com/stats/players/pts/{}.format(page)

发送网络请求 requests(js\html\css)

response = requests.get(url=url) html_data = response.text

数据解析(筛选数据)

selector = parsel.Selector(html_data) trs = selector.xpath(//tbody/tr[not(@class="color_font1 bg_a")]) for tr in trs: rank = tr.xpath(./td[1]/text()).get() # 排名 player = tr.xpath(./td[2]/a/text()).get() # 球员 team = tr.xpath(./td[3]/a/text()).get() # 球队 score = tr.xpath(./td[4]/text()).get() # 得分 hit_shot = tr.xpath(./td[5]/text()).get() # 命中-出手 hit_rate = tr.xpath(./td[6]/text()).get() # 命中率 hit_three = tr.xpath(./td[7]/text()).get() # 命中-三分 three_rate = tr.xpath(./td[8]/text()).get() # 三分命中率 hit_penalty = tr.xpath(./td[9]/text()).get() # 命中-罚球 penalty_rate = tr.xpath(./td[10]/text()).get() # 罚球命中率 session = tr.xpath(./td[11]/text()).get() # 场次 playing_time = tr.xpath(./td[12]/text()).get() # 上场时间 print(rank, player, team, score, hit_shot, hit_rate, hit_three, three_rate, hit_penalty, penalty_rate, session, playing_time) data_dict = { 排名: rank, 球员: player, 球队: team, 得分: score, 命中-出手: hit_shot, 命中率: hit_rate, 命中-三分: hit_three, 三分命中率: three_rate, 命中-罚球: hit_penalty, 罚球命中率: penalty_rate, 场次: session, 上场时间: playing_time} csv_write.writerow(data_dict)

运行代码,效果如下

扫描二维码推送至手机访问。

版权声明:本文由杏彩体育-专注全球体育资讯发布,如需转载请注明出处。

本文链接:http://www.redirected.net/?id=623

分享给朋友:

“Python爬取NBA虎扑球员数据” 的相关文章

男篮欧洲杯积分榜:东契奇遭淘汰,波兰黑马,法国晋级四强

男篮欧洲杯积分榜:东契奇遭淘汰,波兰黑马,法国晋级四强

2022年男篮欧洲杯继续进行,最后两场1/4决赛的比赛结束,我们一起看看战况和进入四强的最终球队,卫冕冠军斯洛文尼亚87-90不敌波兰,法国加时93-85险胜意大利。 三大巨头全部出局 约基奇...

夏联场均8分1板2助攻,篮网30岁老将重返NBA真没戏了

夏联场均8分1板2助攻,篮网30岁老将重返NBA真没戏了

早些时候,NBA夏季联赛正式落幕,NBA球员要再次登场亮相,也只能怪等十月份的季前赛了,而很多球员,也正是想要通过夏季联赛这个跳板,才能看到NBA球员再次登场亮相。 4场篮网比赛,奈特在23.3分钟的...

55万人在线观看互动超30万次 前篮球解说张卫平快手直播回顾“寻找篮球少年”

55万人在线观看互动超30万次 前篮球解说张卫平快手直播回顾“寻找篮球少年”

活动期间,张指导邀请18位篮球大V作为线索人,超600位快手用户参与了这场全民找人计划,发布相关视频总数超过2000个,相关视频互动总量超过1000万,总播放量达到6亿...

韩国女记者直播世界杯遭球迷强搂 面带微笑继续主持

韩国女记者直播世界杯遭球迷强搂 面带微笑继续主持

本文转自【海外网】; 海外网11月22日电 据韩国《朝鲜日报》报道,当地时间11月20日,韩国KBS电视台女记者郑伊秀在卡塔尔直播报道世界杯时,遭...

蔡徐坤打篮球视频曝光,动作干净利索一跃两米高

蔡徐坤打篮球视频曝光,动作干净利索一跃两米高

原标题:蔡徐坤打篮球视频曝光,动作干净利索一跃两米高 今日蔡徐坤几年前在美国高中时期校队打篮球的视频在网络走红,虽然视频有些模糊,不过透过屏幕还是能感受到满满的青春活力,据说蔡徐坤曾在美国校队担任前锋,也曾在节目中表演过篮球。 粉丝们留言评论:“感受到...

王者荣耀:蔡徐坤教你打篮球,特效太美,不敢看!

原标题:王者荣耀:蔡徐坤教你打篮球,特效太美,不敢看! 说到王者荣耀这款游戏,想必许多小伙伴们是不陌生的,当然对于在网上非常火爆的蔡徐坤打篮球的视频也受到了许多网友的调侃,在最近的时候就有网友把蔡徐坤打篮球,制作成了王者峡谷里面的一个英雄皮肤,不得不说这些网友实在是太搞怪了。...