网页爬虫 - python爬虫，需要爬取的数据没在网页源代码中，怎么处理？-PHP中文网问答

首页

文章

后端开发 web前端数据库开发工具 php框架常见问题科技 Java 系统教程电脑教程硬件教程手机教程软件教程游戏教程自媒体新闻

专题

后端开发 web前端数据库开发工具 php框架科技 Java 系统教程电脑教程硬件教程手机教程软件教程游戏教程新闻

AI工具

AI 聊天问答 Agent智能体 AI 文本写作 AI 绘画作图 AI 设计工具 AI 视频创作 AI 音频制作 AI 办公学习 AI 编程开发 Prompt指令

学习

大前端后端开发数据库移动端运维开发计算机基础

编程手册

大前端后端开发数据库移动端运维开发计算机基础

下载

js特效网站源码工具下载类库下载网站素材学习资源插件扩展手机/移动开发手机游戏

最近更新

搜索

后端开发 web前端数据库开发工具 php框架常见问题科技 Java 系统教程电脑教程硬件教程手机教程软件教程游戏教程

网页爬虫 - python爬虫，需要爬取的数据没在网页源代码中，怎么处理？

世界只因有你 2017-06-28 09:25:38

[Python讨论组]

2440

我想抓取直播吧赛事的比分：直播吧链接，可是我用Scrapy只能抓取到日期，主客队等。我的问题是：比分是不是通过Script加载出来的？是不是在这个脚本中bf4.js中？这种Request Method:GET的情况如何准确获取出比分如下图？
通过开发者工具查看出的网页源代码如下：

15:00 中甲第15轮 云南丽江   -   武汉卓尔 武汉文体 广州竞赛 PPTV 文字 手机看直播  比分 欧冠足球新服

即 - 中比分没显示，如何才能抓取渲染完成出来的比分网页呢？

世界只因有你

全部回复(2)

巴扎黑2017-06-28 09:27:38 2楼

数据在https://bifen4pc.qiumibao.com/json/list.htm?74520

赞 +0

添加回复

PHP中文网2017-06-28 09:27:38 1楼

那就使用Selenium 来获取吧，

链接描述

赞 +0

添加回复

专题推荐

更多>

热门话题

热门教程

更多>