1.题目地址：http://111.198.29.45:43589 页面提示打开robots文件，则： 页面有提示输入fl0g.php,那么 获取flag。 2.题目地址：http://111.198.29.45:58979 题目中提示初始文件，那么可以从index.php入手。然而将1.php换成 ...
分类：
Web程序 时间：
2020-02-13 21:13:24
阅读次数：
104
网站通过Robots协议告诉搜索引擎哪些页面可以抓取，哪些页面不能抓取，robots默认都是放在网站根目录。刚建好的WordPress网站，打开robots.txt是能访问的，但是在网站目录却找不到任何robots.txt文件，其实默认的robots文件放在wp-includes/functions ...
分类：
其他好文 时间：
2019-10-19 15:10:57
阅读次数：
250
上传测试的时候，站点显示无法打开。随后我用网址打开根目录的robots文件、图片、静态页···全部可以正常打开··· 我尴尬···一一检查后，我就怀疑是不是客户当初设置gzip压缩的问题了。但连后台都进不了。 这时我先找到判断gzip是否开启的语句，然后在源码里面不做判断，起码可以进后台先。 找到a ...
分类：
其他好文 时间：
2019-08-28 22:28:50
阅读次数：
144
做过网站优化的朋友都知道，搜索引擎蜘蛛爬行抓取网站时首先会去访问根目录下的robots.txt文件，如果robots文件存在，则会根据robots文件内设置的规则进行爬行抓取，如果文件不存在则会顺着首页进行抓取，那么robots文件的工作原理是什么呢？如何对robots.txt文件进行设置。 rob ...
分类：
Web程序 时间：
2019-08-20 23:51:44
阅读次数：
662
如何查看robots协议？怎么写？ 对于seo来讲，robots文件非常重要。搜索引擎爬虫爬取的网站的第一个文件便是这个文件，这个文件告诉搜索引擎网站的那些内容可以被爬取，那些内容不能被爬取，或者说禁止爬取。怎么查看robots协议l？可以使用这种办法，主域名/robots.txt。 怎么写robo ...
分类：
其他好文 时间：
2019-02-25 18:25:28
阅读次数：
224
一.IIS Noinput file specified (IIS上报的错误） 二.apache No input file specified （apache 报的错误） 我是遇到这个错误 三、nginx配置遭遇No inputfile specified ...
分类：
Web程序 时间：
2018-12-11 15:58:32
阅读次数：
200
一、关于robots文件 1. 搜索引擎蜘蛛访问网站时,会先查看网站根目录下有没有robots.txt文件,该文件用于指令搜索引擎禁止抓取网站某些内容或 允许抓取某些内容。注意:就算允许抓取所有内容,也要建一个空的robots.txt文件放在根目录下。 2. 只有在需要禁止抓取某些内容时,robot ...
分类：
其他好文 时间：
2018-07-19 21:08:58
阅读次数：
210
做优化的朋友都知道网站的robots的目的是让搜索引擎知道我们网站哪些目录可以收录，哪些目录禁止收录。通常情况蜘蛛访问网站时，会首先检查你的网站根目录是否有robots文件，如果有，则会根据此文件来进行抓取判断，如果不存在robots，那么网站的所有页面都有可能被收录，这将会给网站带来安全隐患。 例 ...
分类：
其他好文 时间：
2018-07-15 11:20:02
阅读次数：
829
文章来源：百度文库 Html代码seo优化最佳布局，实例讲解 众所周知，搜索引擎对html代码是非常优化的，所以html的优化是做好推广的第一步。一个符合seo规则的代码大体如下界面所示。 1、<!–聚酯多元醇）–> 这个东西是些页面注释的，可以在这里加我的“聚酯多元醇”，但过多关键字可能被搜索引擎 ...
分类：
Web程序 时间：
2017-08-17 17:20:33
阅读次数：
178
360安全检测出WordPress的漏洞注意有跨站脚本攻击（XSS）漏洞和发现robots文件漏洞，修复方法请见文章内容。 ...
分类：
其他好文 时间：
2017-06-20 14:50:01
阅读次数：
166
