1.简介 1.实战1 """微博首页数据抓取实战，根据ajax请求抓取微博首页数据到mongodb数据库""" import time import requests from urllib.parse import urlencode from pyquery import PyQuery fro ...
分类：
Web程序 时间：
2019-02-08 23:22:51
阅读次数：
271
接口请求方式为get请求，如下图抓包查看 Python实现脚本请求接口并以中文打印接口返回的数据 执行脚本，接口返回数据 使用到的函数 urllib.parse.urlencode() 把key-value这样的键值对转换成a=1&b=2这样的字符串 urllib.request.urlopen() ...
分类：
编程语言 时间：
2019-01-31 20:42:48
阅读次数：
233
前言 urllib.parse 里面三个方法：urlencode,quote,unquote详解。 在做接口自动化过程中，http协议在发送url的时候，是以urlencode的编码格式传过去的，通常requests库会帮我们自动处理了。但是服务端返回的url地址，有时候是以urlencode的编码 ...
分类：
编程语言 时间：
2019-01-26 18:01:34
阅读次数：
194
1、Java为网络支持提供了java.net包，该包下的URL和URLConnection等类提供了 以编程方式访问WEB服务 的功能； 2、URLDecoder、URLEncoder提供了 普通字符串 和 application/x-www-form-urlencoded MIME字符串 相互转换 ...
分类：
编程语言 时间：
2019-01-19 14:28:31
阅读次数：
167
转自：https://www.cnblogs.com/g2star/p/3688350.html <?php // Copyright © 2009-2010 xxx.com 版权所有$OOO0O0O00=__FILE__;$OOO000000=urldecode('%74%68%36%7 ...
分类：
Web程序 时间：
2019-01-18 21:51:10
阅读次数：
221
用python也差不多一年多了，python应用最多的场景还是web快速开发、爬虫、自动化运维：写过简单网站、写过自动发帖脚本、写过收发邮件脚本、写过简单验证码识别脚本。 爬虫在开发过程中也有很多复用的过程，这里总结一下，以后也能省些事情。 ? 1、基本抓取网页 get方法 post方法 2、使用代 ...
分类：
编程语言 时间：
2019-01-16 13:51:46
阅读次数：
236
#encoding = utf-8 import urllib2import urllib url = 'http://httpbin.org/post'data={"name":"tom","age":22}data=urllib.urlencode(data) req=urllib2.Reque ...
分类：
Web程序 时间：
2019-01-15 22:56:22
阅读次数：
250
URLEncode.encode(String s,String utf-8) 编码 URLDEcode.decode(String %2b%,String utf-8) 解码 用法： String text1 = java.net.URLEncoder.encode("中国" ,"utf-8" ) ...
分类：
Web程序 时间：
2019-01-15 19:05:37
阅读次数：
168
官网地址：https://www.getpostman.com Postman 的优点： 支持各种的请求类型: get、post、put、patch、delete 等 支持在线存储数据，通过账号就可以进行迁移数据 很方便的支持请求 header 和请求参数的设置 支持不同的认证机制，包括 Basic ...
分类：
其他好文 时间：
2019-01-11 18:04:05
阅读次数：
315
环境准备： Phpstudy （PHP+Apache+Mysql） Sql-lab 首先了解下基础知识： URL编码： 因为在浏览器中，当我们访问一个网址的时候，浏览器会自动将用户输入的网址进行URL编码，因为Http协议中参数的传输是"key=value"这种键值对形式的，所以会将“=”，“#”等 ...
分类：
数据库 时间：
2019-01-08 00:56:02
阅读次数：
165
