高考问答
学党史征文:为什么我在网站放了robots.txt文件,搜索引擎仍在收录
来源:百度文库 编辑:
高考问答
时间:2024/07/17 09:20:58
我的网站上放入了robots.txt文件,禁止所有搜索引擎索引,可是我发现有的搜索引擎仍在收录,这是怎么回事?
那是历史纪录或者还没进行手工更新吧...
为什么我在网站放了robots.txt文件,搜索引擎仍在收录
robots.txt
"robots.txt"是什么?
如何写robots.txt,让百度不收录我BT站上torrent后缀的种子文件?
我把小说粘在写字板,然后放在MP3中`TXT格式,就可看了
为什么我放了阻止搜索引擎的robot.txt仍然被百度搜到
怎样在www.alexa.com网站下载info.txt文件,为什么我总下?.?
怎样在www.alexa.com网站下载info.txt文件,为什么我总下?.?
我放在收藏夹里面的网站为什么打不开了啊?
robots.txt文件里面的参数、命令什么写?谢谢!!