让网站上线测试,但不想网站被搜索引擎收录的方法,
1、做host解析绑定服务器上的网站。
这是最好的办法,域名先不做域名解析,但是可以在自己的电脑上做host解析,绑定在服务器上安装好的网站上,等网站测试完成之后,再进行域名解析。
这样有个好处就是网站只能自己访问,外网是无法访问的,那搜索引擎的蜘蛛就没办法爬你的网站。就不会被收录了。
2、使用网站根目录的robots.txt文件。
在这个文件里写上下列代码。
User-agent: *
Disallow: /
搜索引擎就不会去收录你的网站了。但是这种方法不一定保险,建议使用第一种方法。
robots.txt(统一小写)也叫robots协议,是一种存放于网站根目录下的ASCII编码的文本文件,它通常告诉搜索引擎的蜘蛛,此网站中的哪些内容是不应被搜索引擎的蜘蛛获取的,哪些是可以被蜘蛛获取的。 robots协议并不是一个规范,而只是约定俗成的,所以并不能保证网站的隐私。