百度搜索引擎目前不主动抓取https网页，导致大部分https网页无法收录。但是如果网站一定要使用https加密协议的话该如何做到对百度搜索引擎友好呢。其实很简单：1，为需要被百度搜索引擎收录的https页面制作http可访问版。2，通过user-agent判断来访者，将Baiduspider定向到...
分类：
其他好文 时间：
2014-09-29 10:50:17
阅读次数：
246
C#使用Cookie方法 Cookie是由服务器端生成，发送给User-Agent（一般是浏览器），浏览器会将Cookie的key/value保存到某个目录下的文本文件内，下次请求同一网站时就发送该Cookie给服务器（前提是浏览器设置为启用cookie）。Cookie名称和值可以由服务器端开发自己...
分类：
其他好文 时间：
2014-09-26 18:48:08
阅读次数：
159
$_SERVERHTTP_HOST:localhost//当前请求头中Host:项的内容
HTTP_CONNECTION:keep-alive
HTTP_CACHE_CONTROL:max-age=0
HTTP_ACCEPT:text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8
HTTP_USER_AGENT:Mozilla/5.0(WindowsNT6.1;WOW64)AppleWebKit/537.36(KHTM..
分类：
其他好文 时间：
2014-09-24 19:10:38
阅读次数：
235
如何判断是否是 iPad 浏览器呢，关键是看它的 User Agent 中是否有 iPad。iPad 使用的是 Safari Mobile 浏览器，他的的 User Agent 是：Mozilla/5.0 (iPad; U; CPU OS 3_2 like Mac OS X; en-us) Appl...
分类：
Web程序 时间：
2014-09-23 19:01:35
阅读次数：
275
谨为今后学习参考的笔记。内容来自互联网。Cookie的基本概念：Cookie是由服务器端生成，发送给User-Agent（一般是浏览器），浏览器会将Cookie的key/value保存到某个目录下的文本文件内，下次请求同一网站时就发送该Cookie给服务器（前提是浏览器设置为启用cookie）。Co...
分类：
其他好文 时间：
2014-09-22 22:51:53
阅读次数：
1298
http://www.iefans.net/windows-server-2003-asp-net-ie11-shibie/由于IE11对User-Agent字符串进行了比较大的改动，所以导致很多通过User-Agent来识别浏览器的程序，都相应的出现了无法识别IE11的情况。（普通用户端则可以通过...
HTTP请求415错误 – 不支持的媒体类型(Unsupported media type)通常有以下情况：1：检查你的 http 请求头信息，比如 因为 User-Agent 被服务器设置 拒绝请求了； 比如你写的的爬虫，就很有可能因为没有伪装成浏览器，被拒绝请求 user-agent 详情2.....
分类：
其他好文 时间：
2014-09-22 18:06:22
阅读次数：
385
把user-agent改成Mozilla/5.0 (Windows NT 6.1; rv:32.0) Gecko/20100101 Firefox/32.0就好了
分类：
其他好文 时间：
2014-09-18 09:57:07
阅读次数：
184
In the beginning there was NCSA Mosaic, and Mosaic called itself NCSA_Mosaic/2.0 (Windows 3.1), and Mosaic displayed pictures along with text, and...
分类：
其他好文 时间：
2014-09-17 13:37:52
阅读次数：
371
XSScrapy是一个快速、直接的XSS漏洞检测爬虫，你只需要一个URL，它便可以帮助你发现XSS跨站脚本漏洞。XSScrapy的XSS漏洞攻击测试向量将会覆盖Http头中的Referer字段User-Agent字段Cookie表单（包括隐藏表单）URL参数RUL末尾，如www.example.co...
分类：
其他好文 时间：
2014-09-17 11:45:42
阅读次数：
204
