我目前正在开发Drupal7网站。我将以下内容添加到我的robots.txt文件中(在#Directories部分下)Disallow:/sites/default/files/但是当我在Google中输入“site:www.example.comfiletype:pdf”时，它仍然能够爬进我的/sites/default/files文件夹。谁能帮我弄清楚为什么这些内容仍在被抓取？我在这里得到的唯一相关链接是:CanIaddsites/default/filesinrobots.txt?这没有回答我的问题。 最佳答案 请记住，Goo
“WebSite”和“Organization”类型及其属性应该应用于网站的所有页面还是仅应用于主页？我有有效的JSON-LD代码定义了谷歌移动搜索结果的必要项目，但我不确定它是应该包含在所有页面上还是只包含在根/主页上。 最佳答案 在任何相关的页面上提供它是有意义的。例如，如果这是一个组织的网站，每个页面都是关于/来自该组织的，因此请在每个页面上提供关于该组织的元数据。在某个页面上寻找结构化数据的消费者不一定也在访问和检查主页，因此它可能永远不会知道您提供了相关的元数据。这并不一定意味着您应该在每个页面上包含完整的项目(具有所有属
关闭。这个问题不符合StackOverflowguidelines.它目前不接受答案。这个问题似乎与helpcenter中定义的范围内的编程无关。.关闭9年前。Improvethisquestion我正在开发一个电子商务网站，其用户可以分为两类；普通人和企业。它们之间的区别是短的，商务用户有特殊的折扣，所以它们的价格是不同的；和普通人相比还有一些细微的变化。我的问题是这两个用户是否对相同的模块具有相同的URL是否重要，例如，如果他们正在观看目录:myapp.com/catalog企业用户可能是:myapp.com/business/catalog我问这个问题是因为SEO定位；我需要知道
“WebSite”和“Organization”类型及其属性应该应用于网站的所有页面还是仅应用于主页？我有有效的JSON-LD代码定义了谷歌移动搜索结果的必要项目，但我不确定它是应该包含在所有页面上还是只包含在根/主页上。 最佳答案 在任何相关的页面上提供它是有意义的。例如，如果这是一个组织的网站，每个页面都是关于/来自该组织的，因此请在每个页面上提供关于该组织的元数据。在某个页面上寻找结构化数据的消费者不一定也在访问和检查主页，因此它可能永远不会知道您提供了相关的元数据。这并不一定意味着您应该在每个页面上包含完整的项目(具有所有属
我有许多网站完全托管在AmazonS3上，但页面是通过JavaScript生成的。我想确保这些网站已被Google索引，但由于它们托管在S3上，我似乎没有提供页面的_escaped_fragment_版本的机制。有谁知道如何将Ajax内容编入索引？我宁愿不必复制我的模板服务器端。这是我的网站之一的示例:http://www.web608.org/ 最佳答案 没有真正简单的方法可以做到这一点。我建议您阅读Google关于此主题的建议:https://developers.google.com/webmasters/ajax-crawl
我们有一个要求，我们将文件上传到AmazonS3存储桶，其中包含文件描述、标题、作者、创建日期等元数据。之后，我们将从AmazonS3存储桶创建一个公共(public)静态网站。因此，Google可以通过文件链接为AmazonS3文件编制索引。我有以下问题，当我们为AmazonS3文件添加自定义元标签时，它会在文件的响应header中显示自定义属性(例如x-amz-meta-tag1、x-amz-meta-tag2等)。那么，这些文件的自定义元标记是否已被Google搜索引擎索引？意思是，我可以通过“作者”、“标题”等元数据在Google上搜索我的公共(public)Amazons3文
我打算发布一个社区网站，该网站的主要受众不是英语。这意味着指向/profile/forums等的URL将是英文的，而不是他们的母语。我不关心用户是否在访问不同的英文URL路径时使用该网站，但我担心如果我使用非英语URL，那么搜索引擎在网站上的页面上的拾取是好是坏？有人愿意分享他们的意见吗？ 最佳答案 在我看来，拥有反射(reflect)用户主要语言的URL会更好，因为这会使他们更容易在搜索引擎上找到您的网站(假设他们使用他们的主要语言进行搜索)。从SEO的角度来看，如果可能，请尝试在您的URL中也包含您认为您的受众会使用的相关搜索词
关闭。这个问题不符合StackOverflowguidelines.它目前不接受答案。这个问题似乎与helpcenter中定义的范围内的编程无关。.关闭8年前。Improvethisquestion我使用了一些工具来检查我的SEO，我得到了结果:“您的网站没有利用微格式。微格式是一种技术语义标记，可用于更好地构建提交给搜索引擎的数据。多亏了微格式，Google定期改进其搜索结果的呈现方式。”谁能告诉我如何使用这些微格式，它们会改善SEO吗？问候
问题我有一个使用Angular构建并托管在AmazonS3上的静态SPA站点。我正在尝试让爬虫访问我的预呈现页面，但我无法重定向爬虫请求，因为AmazonS3不提供URL重写选项并且重定向规则有限。我有什么我已将以下元标记添加到我的index.html页面:此外，我的SPA使用漂亮的URL(没有散列#符号)和HTML5推送状态。使用此设置，当爬虫找到我的http://mywebsite.com/about时链接，它将生成一个GET请求http://mywebsite.com/about?_escaped_fragment_=.这是patterndefinedbyGoogle然后是其他爬
我正在尝试弄清楚如何为我的AngularJS应用程序上未找到的页面获取404文档状态错误以保持良好的SEO。我想做一些类似于RedBullSoundSelect网站做的事情，但我不确定他们是怎么做的？示例404网址https://www.redbullsoundselect.com/no-page-here如您在上面的示例中所见，URL更改为/404，您会收到URL中原始路径的404文档状态错误，即no-page-here在我的AngularJS应用程序上，我只有:.otherwise({class:'page-not-found',title:'404PageNotFound',de
