返回首页

如何用python爬取网页中隐藏的div内容?

89 2024-01-21 16:41 admin

这种是用js实现的。所以后面的内容实际上是动态生成的,网络爬虫抓取的是静态页面。至于解决办法,网上有几种:

一种是使用自动化测试工具去做,比如selenium,可以模拟点击等操作,但是这个其实和爬虫还是有很大区别的。

二是利用特定的类库在后端调用js,python的倒是有,但是java的我就不清楚了。

三是自己找到相关的页面的js代码,分析出来相关的请求url,直接调新的url就行了,但是一般的js都是加密压缩的,但是你可以试试。

顶一下
(0)
0%
踩一下
(0)
0%
相关评论
我要评论
用户名: 验证码:点击我更换图片

网站地图 (共14个专题45183篇文章)

返回首页