Linux平台下,您可以使用host ip命令
windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令
非 *.baidu.com 或 *.baidu.jp 即为冒充

检测死链 http://tool.chinaz.com/Links Header状态码

SRE实战 互联网时代守护先锋,助力企业售后服务体系运筹帷幄!一键直达领取阿里云限量特价优惠。

Robots
同时存在动态和静态链接,那么建议屏蔽动态链接
User-agent,Allow,Disallow,Sitemap的首字母都是大写的。
User-agent,Allow,Disallow,Sitemap的冒号后面都是有空格的,没有写空格直接写接下来的内容会出错。
网站通常会屏蔽搜索结果页面。因为搜索结果页和正常展示的内容页相比,标题和内容上相同的,而这两个页面链接是不同的。那搜索引擎该将这篇文章归属于哪个内链呢?这样就会造成内链之间相互竞争,造成内部资源损耗。
建议屏蔽js文件。Disallow: /*.js$,以 .js 结尾的路径统统被屏蔽,这样就屏蔽了js文件。
路径是区分大小写的。Disallow: /ab/ 和 Disallow: /Ab/ 是不一样的。
robots.txt会暴露网站相关目录,写robots.txt时要考虑到这一点。

change skins


ping提交sitemap
https://www.google.com/webmasters/sitemaps/ping?sitemap=http://你的网站地图路径.com/sitemap.xml
https://www.google.com/ping?sitemap=http://你的网站地图路径.com/sitemap.xml
https://www.bing.com/webmaster/ping.aspx?sitemap=http://你的网站地图路径.com/sitemap.xml

 

扫码关注我们
微信号:SRE实战
拒绝背锅 运筹帷幄