码迷,mamicode.com
首页 > 编程语言 > 详细

JAVA爬虫--JS文件数据快速解析

时间:2018-07-18 20:26:21      阅读:203      评论:0      收藏:0      [点我收藏+]

标签:nbsp   ade   type   直播平台   proc   服务器   jsoup   com   vpd   

   最近在做一个足球数据爬虫,连接的是某常用足球比分直播平台的网站。在抓取的过程中方法很简单。打开网页地址,进入开发者模式,查看其数据加载。

发现其比分数据是采用获取平台js文件的方式从服务器下载下来然后执行js进行比分展现的.

    技术分享图片

  使用jsoup开源框架进行获取,在代码中合理的设置header。代码如下:

    技术分享图片

    解析方法如下:

    技术分享图片

输出结果:

    技术分享图片

又或者使用以下方法解析,但相对复杂,没有上述方法来的优雅,显得繁琐难懂:

技术分享图片


JAVA爬虫--JS文件数据快速解析

标签:nbsp   ade   type   直播平台   proc   服务器   jsoup   com   vpd   

原文地址:http://blog.51cto.com/13876516/2146883

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!