我们有一些客户在他们的真实域上线之前在UserDirURL上构建他们的站点。UserDirURL始终采用以下格式:http://1.2.3.4/~johndoe有时,Google会抓取这些UserDirURL,即使该网站在http://johndoe.com上线后,临时网站也会显示在结果中。因此,一旦客户在http://johndoe.com上直播,如何阻止Google抓取UserDir地址?(当然,我需要谷歌来抓取真正的域名,因为SEO对我们的客户很重要) 最佳答案 为此,我使用规范标签。如果像这样将规范标签放在index.htm