Polymer_dg
发表于 2017-8-19 19:14:58
有什么办法 不让网站 被各大搜索引擎收录
除了去 暗网
余晖脉脉
发表于 2017-8-19 19:15:35
萌䒤萌
发表于 2017-8-19 19:19:12
全站必须登录才能访问就是
leaveoff
发表于 2017-8-19 19:19:29
设置Robot.txt是可以的。。。
余晖脉脉
发表于 2017-8-19 19:19:42
萌䒤萌
发表于 2017-8-19 19:20:55
余晖脉脉 发表于 2017-8-19 19:19
还是会收录登陆页面
yc020t
sky170
发表于 2017-8-19 19:21:30
robost.txt?
sky170
发表于 2017-8-19 19:21:50
我记得meta头部信息也可以设置好像
hdown
发表于 2017-8-19 19:23:23
robost.txt加上nginx判断一下蜘蛛的ua
dvbhack
发表于 2017-8-19 19:23:46
就是robots.txt，“各大搜索引擎”还是能遵守的，不遵守的都是些不知道什么玩意儿的搜索引擎
