我的网站上有一些我用排除的合法页面.主要目标是这些页面不会出现在搜索引擎中。我是否需要将它从我的sitemap.xml中排除，或者元标记是否足够。如果不是，为什么我需要包含它？ 最佳答案 搜索引擎使用站点地图来发现您的内容，因此添加您不希望被编入索引的内容并不是很有用。Thisdocumentationpage概述站点地图何时有用:AsitemapisafilewhereyoucanlistthewebpagesofyoursitetotellGoogleandothersearchenginesabouttheorganizati

关闭。这个问题不符合StackOverflowguidelines.它目前不接受答案。这个问题似乎与helpcenter中定义的范围内的编程无关。.关闭7年前。Improvethisquestion我有一个在线商店，在主导航中有不同的类别。IE。A类、B类等我在主导航栏中也有一个名为“促销商品”的链接。它指向一个页面，该页面列出了类别A和类别B的特价商品。我应该将rel="nofollow"标签添加到SaleItems链接吗？

我该从哪里开始呢？我知道如何向页面添加元标记，我想Page#onBeforeRender是这样做的好地方。但是:如何确定当前URL是否包含“?wicket:”？打电话((WebRequest)getRequest()).getHttpServletRequest().getRequestURL()只返回问号前的部分，getPageParameters()返回null。提前感谢您的启发:) 最佳答案 是的.....又对了，我在发布后偶然发现了答案:((WebRequest)getRequest()).getHttpServletReq

我试图禁止网站的某些部分而不是整个网站。我对此比较陌生，所以如果有人指导我完成它，我将不胜感激。我知道您可以Disallow:/page1.cfmfromcrawlers但如果我只想禁止该页面的一部分，例如该页面上存在的链接或联系表怎么办？这个功能甚至可能吗？根据我最近阅读的一些论坛，“nofollow”功能不再有效，因为爬虫变得越来越聪明。(我不知道那个论坛的可信度如何，所以如果有人有更好的来源请分享)有什么建议吗？ 最佳答案 不要使用nofollow，你会在你的页面上丢失linkjuice。Robots.txt只是对爬虫的提示，

这个问题在这里已经有了答案:RegExexpressiontofindahreflinksandaddNoFollowtothem(3个答案)关闭9年前。我需要将rel="nofollow"添加到所有外部链接(不指向我的网站或其子域)。我分两步完成此操作，首先我使用以下正则表达式将rel="nofollow"添加到所有链接(甚至内部链接):然后在第二步中，我使用以下正则表达式消除内部链接(我的网站及其子域)的rel="nofollow":如何一步完成？可能吗？

因为一些搜索引擎并不完全支持JSON-LD格式，所以我决定也使用RDFa。当我用GoogleStructuredDataTestingTool检查我的HTML时在结果Pane中显示了2个NewsAricles，但实际上只有一个。在同一页面上使用两个等效的JSON-LD和RDFa丰富网页摘要是一种好做法吗？ 最佳答案 它canmakesense以不同的语法提供相同的数据:如果一个消费者仅支持JSON-LD而另一个消费者仅支持RDFa，这是让两个消费者都使用您的数据的唯一方法。如果能指出这两种表示是关于同一件事，那将很有用。您可以通过指

我正在启动这个大型数据库(超过150万条记录)驱动的网站，我想先了解一些SEO技巧..我需要将哪些链接标记为rel="nofollow"、rel="me"等？如何防止搜索引擎跟踪仅供用户访问的链接？例如“登录”、“发布消息”、“搜索”等。我是否需要阻止搜索引擎进入网站的“搜索”部分？如何预防？该站点基本上是电影和Actor的数据库。如何创建一个好的站点地图？我需要阻止搜索引擎阅读用户评论和评论？？？是否需要其他robots.txt或.htacces配置？如何正确使用noindex？其他提示？谢谢! 最佳答案 如果您只有内部链接，没有

在查看我的googlebot错误时，其中一个是来自目录链接的403错误，我从未将其放在任何地方。在该页面搜索了一下后，我发现谷歌跟踪了它在一些javascript代码中找到的链接，特别是这段代码:$.ajax({type:'post',url:'/data/pages/'+r,success:function(data){$('#mainbox').animate({"height":a},80,function(){谷歌机器人不理解它的+r部分，并不断给我关于这个的错误。我知道您可以向anchor添加rel="nofollow"以告诉googlebot不要关注它们，但是有没有一种方法

所以我不久前制作了一个关于制作网站时应遵循的步骤的指南，它几乎是一个页面，其中包含大量关于在哪里做/得到某些事情的引用。我现在才开始阅读诸如nofollow链接之类的内容，但我不确定它们是否适用。所有链接都与网络开发相关，因此与网站本身相关。有一个部分提供了一些不太适用的好网站示例。我应该为这一部分使用nofollow链接，还是为本网站上的所有链接使用nofollow链接？我不太确定在这种情况下我应该做什么。我现在提到这一点是因为其中一个网站的网站管理员实际上找到我说他们因指向其网站的无效链接而受到Google的处罚。是我的原因吗？还是不相关？ 最佳答案

问题:我有大量的免责声明副本，它们是模态的一部分，并且在单击按钮之前作为display:none位于正文中。我不希望模式中的副本被机器人索引，但我不能在标题中抛出一个nofollow，因为我希望页面上的副本的其余部分被索引。有没有一种方法可以将相对通用的nofollow分配给包含我要告诉搜索引擎忽略的内容的div或段落标记？部分解决方案:我看到对于googlebot，您可以将内容包装在googlebot标签中以描述应该禁用索引的位置。SomecontentthatwontgetindexedbyGoogle但是，我需要一些同样适用于Bing和Yahoo的东西。