这是我的jQuery$(document).ready(function(){$('#name').load('file.php?query=',function(){$('#loading').hide();});});在加载初始html之后，它会将file.php中的内容加载到id=name的div中。这使我能够在缓慢移动的内容加载时显示加载图像。它很慢，因为它使用几个不同的jsonapi来获取它的内容。现在，file.php上有一堆不同的链接。谷歌会跟随这些链接到其他页面。或者谷歌只会在网页html的初始加载时跟踪链接？我问这个是因为当我用浏览器查看时，使用jquery加载的动态
我有一个为大型网站自动生成的站点地图，其中包含许多导致我需要删除的404错误的URL。我需要仅根据站点地图中的URL生成报告，而不是根据网站上的错误链接导致的抓取错误。我看不到任何过滤抓取错误报告以仅包含这些URL的方法。有谁知道我可以实现这一目标的方法？谢谢 最佳答案 我不确定您是否可以通过网站站长工具轻松完成此操作，但自行检查它们是微不足道的。这是一个perl程序，它将接受站点地图文件并检查每一行，打印每个url及其状态。#!/usr/bin/perlusestrict;requireLWP::UserAgent;my$ua=L
我已经查过了，但没有找到一致的答案。我想在我的页面中嵌入一个谷歌文档(当你发布你的谷歌文档时，它会给你一个iframe)。像谷歌这样的搜索引擎是否能够读取文档的内容(只是文本，但可能有重要的关键字)？或者它会表现得好像页面是空的吗？如果它无法为文本编制索引，那么是否有任何方法可以将嵌入内容包含在某种服务器端，以便它看起来像是硬编码到蜘蛛的html中？ 最佳答案 不，他们不会阅读它并将内容与您的网站相关联。他们最终会在某个时候抓取它，但不会将其关联为“您的”内容。唯一的方法是编写服务器端代码来抓取内容并将其输出到您的页面中。现在，该页
关闭。这个问题需要更多focused.它目前不接受答案。想改进这个问题吗？更新问题，使其只关注一个问题editingthispost.关闭7年前。Improvethisquestion我要为我的一位客户创建一个在线购物网站。我必须让这个网站SEO友好，因此在继续制作基于CMS的自定义网站之前，我必须了解一些事情。正如我所说，我将制作一个基于CMS的自定义网站，以便我的客户能够通过CMS添加新内容，但我不太了解一些事情。例如:我有一个index.php页面，其中有许多指向不同产品的链接，所有这些链接都是使用PHP通过数据库创建的。站点链接如http://www.def.com/shoes
我正在构建一个具有以下url结构的网络应用程序:/isthelandingpage,notangularbased/chooseusesAngular,itbasicallycontainssearch/fund/alsowithAngular,containsspecificdataforacertainfund索引没有问题/，它只是一个简单明了的html，已经过SEO优化。但我都需要/choose和/fund/...被Google抓取，这就是问题所在。我的应用程序使用HTML5模式，我们从不使用像foo.com#!/choose这样的hashbangs指向应用程序url。,总是fo
我在1-2个月前提交了站点地图。谷歌在几天内开始非常快速地抓取并索引了大约25%的页面然后它突然停止并且不再抓取了。我为新抓取的页面创建了一个Google提醒。我每天都会收到一些页面已被抓取的警报(只有新页面)。Robots.txt的设置为允许所有这是屏幕截图，正如您在开始时看到的曲线陡峭但随后变得停滞不前。 最佳答案 这个问题的官方答案可以在这里找到:https://support.google.com/webmasters/answer/34441我个人也经历过一次，它可以追溯到(有时)缓慢的网络服务器响应时间，之后Google
关闭。这个问题不符合StackOverflowguidelines.它目前不接受答案。我们不允许提问寻求书籍、工具、软件库等的推荐。您可以编辑问题，以便用事实和引用来回答。关闭4年前。Improvethisquestion我想以编程方式检索Google搜索结果，以便查找特定域在搜索结果页面中的排名。但是，我不想简单地抓取搜索结果页面，因为我期望有大量的搜索量并且需要经常这样做，如果我理解正确的话，这会被Google判断为滥用吗？我能找到的大多数脚本/类都尝试解析HTML页面，一定有更好的方法。是否有获取谷歌搜索结果的API？有什么想法吗？谢谢!
关闭。这个问题不符合StackOverflowguidelines.它目前不接受答案。这个问题似乎与helpcenter中定义的范围内的编程无关。.关闭8年前。Improvethisquestion我构建了许多通过AJAX/jQuery动态加载内容的单页网站。我一直在阅读传呼机对SEO有多糟糕。无论如何，如何在不将单页网站拆分为多个页面的情况下从单页网站中获得最多的SEO结果？
关闭。这个问题是off-topic.它目前不接受答案。想改进这个问题吗？Updatethequestion所以它是on-topic用于堆栈溢出。关闭13年前。Improvethisquestion我想知道我应该如何(或是否)通过我的博客引导Googlebot。我应该只允许访问具有单个条目的页面还是应该抓取主页(也有完整的条目)？我担心的是，当我添加新帖子时主页会发生变化，而谷歌会保留旧版本一段时间。我还发现将人们引导至主页很烦人-您必须通读所有帖子才能找到您感兴趣的帖子。那么解决此问题的正确方法是什么？
我有一个非常独特的情况，我认为这里的任何其他主题都无法与之相关。我有一个动态加载/嵌入到第三方网站的电子商务模块，没有iframe直接JSON到Web客户端到内容。我根本无法访问这些第三方网站，除了从他们的页面加载我的javascript文件并动态生成内容。我知道#!方法，但这在这里并不好，我的JS确实在嵌入式平台内生成了“url”，但它们是假的，而且只用于地址栏，我不相信谷歌爬虫能做到这一点。所以我的问题是，是否有一个我们可以设置为指向url外部的元数据，即返回到我的带有静态可抓取内容的服务器。IE。将规范指向我的服务器......但我再次认为这行不通。
