服务器环境是windows services 2008+SQL2008+IIS7网站是
www.marshell.net ,在查询谷歌收录的过程中发现(http://www.google.com.hk/search?q=site%3Amarshell.net&num=100 )
1.ww.marshell.net wwww.marshell.net 这样打不开的二级域名也被收录了,title显示的是IIS7;
2.甚至还有www.leoch.comwww.marshell.net/这样奇怪的URL,以前www.leoch.com这个网站也放在同一台服务器上;
3.被收录的产品页面尾巴都有golf cart这个词,而源代码也没有这个。
ROBOT.txt是这样设置的:
域名解析:
收录截图1:
收录截图2
请问这是服务器问题还是程序问题或者解析方面的问题。
个人设想
:
1.robot.txt禁止抓取;
2.谷歌管理员工具里删除。
麻烦 @
livid 删除
http://v2ex.com/t/85298 这个相同的主题,编辑得不好。