码迷,mamicode.com
首页 >  
搜索关键字:java爬虫    ( 135个结果
java爬虫,网页简易爬小说程序
package PaChong; import org.jsoup.Jsoup; import org.jsoup.nodes.Document; import org.jsoup.nodes.Element; import org.jsoup.nodes.Node; import org.jsou ...
分类:编程语言   时间:2020-03-16 14:28:41    阅读次数:86
万字分享,我是如何一步一步监控公司MySQL的?
整理了一些Java方面的架构、面试资料(微服务、集群、分布式、中间件等),有需要的小伙伴可以关注公众号【程序员内点事】,无套路自行领取 更多优选 "一口气说出 9种 分布式ID生成方式,面试官有点懵了" "3万字总结,Mysql优化之精髓" "为了不复制粘贴,我被逼着学会了JAVA爬虫" "技术部突 ...
分类:数据库   时间:2020-02-20 13:18:27    阅读次数:110
一口气说出Redis 5种数据结构及对应使用场景,面试要加分的
整理了一些Java方面的架构、面试资料(微服务、集群、分布式、中间件等),有需要的小伙伴可以关注公众号【程序员内点事】,无套路自行领取 更多优选 "一口气说出 9种 分布式ID生成方式,面试官有点懵了" "3万字总结,Mysql优化之精髓" "为了不复制粘贴,我被逼着学会了JAVA爬虫" "技术部突 ...
分类:其他好文   时间:2020-02-17 17:53:07    阅读次数:59
为了不复制粘贴,我被逼着学会了JAVA爬虫
整理了一些Java方面的架构、面试资料(微服务、集群、分布式、中间件等),有需要的小伙伴可以关注公众号【程序员内点事】,无套路自行领取 本文作者: "程序员内点事" 更多精选 "技术部突然宣布:JAVA开发人员全部要会接口自动化测试框架" "3万字总结,Mysql优化之精髓" 写在前边 受疫情影响一 ...
分类:编程语言   时间:2020-02-14 16:12:46    阅读次数:80
Java爬虫爬取 天猫 淘宝 京东 搜索页和 商品详情
Java爬虫爬取 天猫 淘宝 京东 搜索页和 商品详情。先识别商品url,区分平台提取商品编号,再根据平台带着商品编号爬取数据。利用爬虫技术完成的一个 商品历史价格记录网站 项目——值得吗?价格记录网站 github地址:https://github.com/xivinChen/zhi-de-ma
分类:编程语言   时间:2020-01-10 00:51:44    阅读次数:197
java爬虫爬取学校毕设题目
背景 效果 思路 代码准备 依赖(jar包): 建表 代码 java爬虫过程解析 如何解决分页问题 背景 最近很多大四学生问我毕业设计如何选题 “你觉得图书管理系统怎么样?” “导师不让做这个,说太简单” “那你觉得二手交易平台怎么样?” “导师说没新意,都有咸鱼了你做这个有什么意思?要新颖的” “ ...
分类:编程语言   时间:2019-12-27 23:40:57    阅读次数:212
Java读取本地json文件
背景 之前一直在弄一个Java爬虫,将爬取的信息保存到了数据库中。但这毕竟是一个课程设计,在设计前端GUI,展示数据的时候最开始是直接通过select语句从数据库中查找的,但我担心交给老师后,老师还要配置JDBC的参数创建数据库插入表等一些繁琐操作,便想要保存到本地。昨晚看到同学从数据库中导出一个j ...
分类:编程语言   时间:2019-11-17 15:02:28    阅读次数:101
java 爬虫下载酷狗top500
想下载歌曲,可app,网站啥的都需要会员,作为一个穷屌丝,没钱啊。所以想搞个代码去下载歌曲, 打开酷狗top500:http://www.kugou.com/yy/rank/home/1-8888.html 看到只有22个,有看了url猜测分页果然:把url改为:http://www.kugou.c ...
分类:编程语言   时间:2019-11-16 12:24:37    阅读次数:178
Java爬虫实现京东物流查询
网上没有免费的接口,只能自己写一套了,参考代码如下 ...
分类:编程语言   时间:2019-10-30 11:43:44    阅读次数:323
java-爬虫-14-采用Redis创建url仓库,实现分布式爬虫
前言使用之前单应用的队列仓库存储抓取的url存在以下两个弊端: 单应用时候,加入服务宕机了,则单应用中的队列仓库里面的url就会为空,则此时就会从页面的首页重新抓取 在加快爬虫抓取速度时候,我们有时候需要部署多节点,实现多节点抓取,加快抓取速度,但是多节点抓取同一个页面时候,怎样保证哪些url已经抓... ...
分类:编程语言   时间:2019-10-20 23:59:18    阅读次数:312
135条   上一页 1 2 3 4 ... 14 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!