这个报错也是一直困扰了我许久，服务端一直打印这个报错，但是页面数据响应又都正常，起初真不知道是因为什么原因，能看出来他是在调用80端口， 但是不明白为什么会调用80端口。一度以为是config.js里面配置问题，所以解决的思路就一直在考虑配置方面，端口等方面。 最后发现都没有效果，在网上也查了各种类 ...
分类：
其他好文 时间：
2019-09-01 01:01:55
阅读次数：
179
当天完成的任务： （1）提交gitlab代码 （2）协助组员完成detail评论页面数据的获取。 （3）进行豆瓣网中评论的网络爬虫。 第二天的计划： （1）与组员完成comment页面的评论数据以及页面的完成。 （2）继续从豆瓣网进行网络爬虫的评论数据连接。 个人小结： 今天我和组员进行了detai ...
分类：
其他好文 时间：
2019-08-31 21:41:48
阅读次数：
86
主要针对后端用户开发 安装这里就不细说了。 1. 首先添加一个我们需要测试的设备 2. 在设备里面，数据主要分为属性和遥测 3.然后我们通过请求进行数据的上报 （本文演示参考官方文档） 在这里我们使用http 请求进行演示 从httpAPI 中，我们找到设备属性上报的接口 A52DPvi1AL7tm ...
分类：
其他好文 时间：
2019-08-27 11:03:49
阅读次数：
1218
不正确的线程中止 Stop Stop:中止线程，并且清除监控器锁的信息，但是可能导致 线程安全问题，JDK不建议用。 Destroy: JDK未实现该方法。 理想状态：要么自增成功i=1, j=1，要么自增失败i=0, j=0 真正程序执行结果：i=1, j=0 没有保证同步代码块里面数据的一致性， ...
分类：
编程语言 时间：
2019-08-27 00:59:09
阅读次数：
108
描述性分析的作用，是通过对搜集来的数据进行分析，以及获得对变异及其商业环境影响更好的认知。 变量分类： 1.取值直接受决策者控制的变量称之为决策变量。 2.不受决策人控制的因素的影响可能会出现不确定性波动称之为随机变量或不确定性变量。 数据类型： 总体数据和样本数据。 数量数据和属性数据。 截面数据 ...
分类：
其他好文 时间：
2019-08-26 00:35:53
阅读次数：
88
1.java基础 （1）算法找出一个数组中最大的值？ （2）排序的算法（效率最高的）？ （3）数据结构 链表简单的实现？？？ 2.spring AOP 的应用 3. Hibernate 和mybatis 的区别 ，hibernate的四种状态 ，主要项目中用到Hibernate 的那些方面？？ 4. ...
分类：
其他好文 时间：
2019-08-24 09:14:56
阅读次数：
68
目标爬取社会信用码 http://125.35.6.84:81/xk/ 1.首先界面是一个简单的分页查询 2.刷新一下，发现数据是ajax请求的 3.查相关参数 4.点击一条记录进去 5.发现数据也是ajax请求的 6.查看参数发现，是根据之前的ID查询的 7.开始work，首先爬取前面数据的ID， ...
分类：
其他好文 时间：
2019-08-23 13:26:01
阅读次数：
58
需求：爬取搜狗首页的页面数据 requests模块如何处理携带参数的get请求，返回携带参数的请求 需求:指定一个词条，获取搜狗搜索结果所对应的页面数据 之前urllib模块处理url上参数有中文的需要处理编码，requests会自动处理url编码 发起带参数的get请求 params可以是传字典或 ...
分类：
编程语言 时间：
2019-08-19 19:17:56
阅读次数：
121
1 <!-- 2 sessionStorage的使用：存储数据到本地。存储的容量5mb左右 3 1.这个数据本质是储存在当前页面的内存中 4 2.他的生命周期为关闭当前页面，关闭页面，数据会自动清楚 5 6 setTtem(key,value):存储数据，以键值对的方式储存 7 getItem(ke... ...
分类：
其他好文 时间：
2019-08-18 20:01:08
阅读次数：
103
硬盘存储 (1) 基于终端指令 * 保证parse方法返回一个可迭代类型的对象(存储解析到页面内容) * 使用终端指定完成数据存储到磁盘文件的操作 scrapy crawl 爬虫文件名称 -o 磁盘文件.后缀 (2) 基于管道 * items: 存储解析到的页面数据 * piplines： 处理持久 ...
分类：
其他好文 时间：
2019-08-15 10:53:08
阅读次数：
91
