移动端编写部署 移动站适配基础知识点 跳转代码（PC端修改） 跳转适配 PC和移动代码标示，让百度蜘蛛很容易来识别是PC站还是移动站 网站禁止转码 拓展阅读 https://ziyuan.baidu.com/college /type=3&cate=mobile ...
分类：
移动开发 时间：
2019-05-02 00:00:59
阅读次数：
251
之前织梦官方推出了一个百度ping插件，不过后来没什么用了，而且百度的推送规则也改了不少，最近百度站长平台就推出了实时推送原创链接地址给百度，这样肯定比百度蜘蛛通过sitemap抓取连接要好很多了，而且还能确保网站内容的原创性。对于SEO优化能起到加快收录的效果，所以还是挺不错的。 可以说很多织梦的 ...
分类：
其他好文 时间：
2019-03-26 00:59:14
阅读次数：
371
HTML面抓速度取对网站的影响有哪些1、网站改版如果你的网站升级改版，并且针对部分URL进行了修正，那么它可能急需搜索引擎抓取，重新对页面内容进行评估。这个时候其实有一个便捷的小技巧：那就是主动添加URL到sitemap，并且在百度后台更新，第一时间告知搜索引擎它的变化。2、网站排名大部分站长认为，自百度熊掌号上线以来，它解决了收录问题，实际上目标URL，只有不停的被抓取，它才可以不断的重新评估权
分类：
Web程序 时间：
2018-12-29 00:16:05
阅读次数：
235
有时候我们在分析百度蜘蛛的时候，会发现很多的ip，这些个ip地址，根据后面的参数可以发现都是百度的。刚学习SEO不久的同学肯定要问：这些ip地址到底代表什么含义，是不是不同的ip地址所代表的含义不一样呢?对权重和抓取是否有影响?哪些是无效的蜘蛛，哪些是站长工具的蜘蛛，那些又是百度自己真正的蜘蛛?首先 ...
分类：
其他好文 时间：
2018-06-06 00:56:56
阅读次数：
173
Hexo的永久链接的默认格式是 ，比如访问站点下某一篇文章时，其路径是 ，如果我们的文章标题是中文的，那么该路径就会出现中文字符。在路径中出现了中文字符很容易引发各种问题，而且也不利于seo，因为路径包含了年月日三个层级，层级太深不利于百度蜘蛛抓取。 解决办法就是利用其它的插件来生成唯一的路径，这样 ...
分类：
其他好文 时间：
2018-05-31 02:46:56
阅读次数：
294
robots.txt是一个纯文本文件，是搜索引擎蜘蛛爬行网站的时候要访问的第一个文件，当蜘蛛访问一个站点时，它会首先检查该站点根目录下是否存在robots.txt，如果存在，搜索机器人就会按照该文件中的内容来确定访问的范围，相当于网站与搜索引蜘蛛遵循协议，如果该文件不存在，所有的搜索蜘蛛将能够访问网 ...
分类：
其他好文 时间：
2017-06-17 13:51:05
阅读次数：
201
百度新闻yy.com/bbs/thread-29510683-1-1.html百度知道百度新闻yy.com/bbs/thread-29510685-1-1.html百度知道百度新闻yy.com/bbs/thread-29510693-1-1.html百度知道百度新闻yy.com/bbs/thread ...
分类：
其他好文 时间：
2017-06-11 10:07:35
阅读次数：
149
转自：Shell判断字符串包含关系的几种方法 现在每次分析网站日志的时候都需要判断百度蜘蛛是不是真实的蜘蛛，nslookup之后需要判断结果中是否包含“baidu”字符串 以下给出一些shell中判断字符串包含的方法，来源程序员问答网站 stackoverflow 以及segmentfault。 方 ...
分类：
系统相关 时间：
2017-01-14 23:14:40
阅读次数：
362
我们站长查看网站访问数据，分析IP来源是我们站长的日常工作，对一些异常的IP段，我们首先要区分是否是搜索引擎蜘蛛的IP段，以免误伤，下面我们就以2段IP为例，一个是百度蜘蛛的220.181.108.140，另外一个是非百度蜘蛛的180.91.55.21。看看应该如何区分百度搜索引擎蜘蛛的IP段。 一 ...
分类：
其他好文 时间：
2016-12-09 15:55:02
阅读次数：
223
访问某些接口携带了奇怪的参数“*&^%$”如http://weidian.com/item.html?itemID=48335375&p=-1/*&^%$"使用URL解码工具解码无效，查看nginx日志：egrep‘itemID=‘/data/logs/nginx/20161129/*|grep-F‘*&^%$‘--color看到来源地址比较奇怪，使用ip138查看地址都是..
分类：
其他好文 时间：
2016-11-30 17:50:59
阅读次数：
141
