最近做一个爬虫项目，需要curl请求第三方系统，其中一个请求放到postman的时候秒回，代码curl请超时，打印错误信息：empty reply from server 翻阅网上资料无果，只能用排除法，去掉请求的一些配置看是哪里影响了，最后发现去掉post data 后请求秒回，虽然返回的是请求失 ...
分类：
Web程序 时间：
2021-05-24 07:00:36
阅读次数：
0
# #一、填写请求头 #二、配置程序延迟时间 #三、填写源IP文件 #四、经了解，该接口限制一分钟采集45个 # import requests import json import os from fake_useragent import UserAgent from xlwt import W ...
博主最近工作的时候，公司后台使用的JAVA，在做登陆时总会传来一个token然后我存在了本地存储中或Vuex中，之后每一次请求把它带在请求头上，然后就好奇想要自己做一个后台服务器然后做一个完整的登陆的逻辑。 后台的搭建 对于一个前端开发人员，当然会选择更容易上手的Node.js的express搭建 ...
分类：
Web程序 时间：
2021-04-26 13:54:34
阅读次数：
0
SpringMVC支持Ajax @ResponseBody将返回的数据放在响应体中如果返回值是对象，jaskson包自动将对象转换为json格式 @RequestBody获取请求体 HttpEntity获取请求头 ResponseEntity既能返回响应数据还能定制响应头 HttpMessageCo ...
分类：
其他好文 时间：
2021-04-15 12:35:45
阅读次数：
0
CSRF：跨站请求伪造 （cross-site request forgery) cookie伪造 用户在注册网站登录过 引诱点击(链接自动携带cookie) 防御： 加token验证 referer验证 页面来源 是否来自该站点下的页面 隐藏令牌 (类似于token 放在http请求头中) XSS ...
分类：
其他好文 时间：
2021-04-07 11:37:38
阅读次数：
0
request的header信息在通过feign调用的时候，不能直接传过去，可以写一个拦截器，给他发过去，但是中间出了个小bug，报错too many bytes written，经百度，找了如下https://blog.csdn.net/qq_39986681/article/details/10 ...
分类：
其他好文 时间：
2021-04-07 11:20:39
阅读次数：
0
常见的问题，记录操作日志中发现，getRemoteAddr取到的客户端的ip地址不是真实的ip，需要解析请求头中的信息获取正确ip。 public static String getIpAddress(HttpServletRequest request) { String ip = request ...
分类：
编程语言 时间：
2021-04-07 10:50:41
阅读次数：
0
Scrapy框架架构： Scrapy框架介绍： 写一个爬虫，需要做很多的事情。比如：发送请求、数据、数据存储、反反爬虫机制（更换ip代理、设置请求头等）、异步请求。这些工作如果每次都要自己从零开始写的话，比较浪费时间’因此Scrapy 把一些基础的东西封装好了，在它上面写爬虫可以变的更加的高效（爬取 ...
分类：
其他好文 时间：
2021-04-06 15:10:26
阅读次数：
0
@Component public class SecuringRequestInterceptor implements RequestInterceptor { @Override public void apply(RequestTemplate requestTemplate) { Serv ...
分类：
其他好文 时间：
2021-03-16 14:01:13
阅读次数：
0
在main.js中加上以下代码 // 添加请求拦截器 axios.interceptors.request.use(config => { // 在发送请求之前做些什么 //判断是否存在token，如果存在将每个页面header都添加token //if中的值为登陆时存入vuex中的token值 / ...
分类：
其他好文 时间：
2021-03-15 10:48:06
阅读次数：
0
