我有一个AngularJSSPA站点,我想使用网站管理员工具中的google的“FetchasGoogle”功能对其进行测试。我对结果有点困惑。来自Googlebot的屏幕截图看起来是正确的,但是响应不包含“ui-view”(ui-router)中的任何内容......有人可以解释这里发生了什么吗?由于屏幕截图正确,谷歌是否正确地为网站编制了索引?还是google无法正确执行JS以进行索引? 最佳答案 这是一个混合包。从一些测试中,我发现GoogleBot在某些情况下能够索引一些AJAX获取的内容。一个让所有搜索引擎满意的安全选择是
我有以下网址www.example.com/index.php?tag=xxx我想使用.htaccess使其像下面这样www.example.com/xxx我用这段代码完成了:Options+FollowSymLinks-MultiViews#Turnmod_rewriteonRewriteEngineOnRewriteBase/RewriteCond%{REQUEST_FILENAME}!-fRewriteCond%{REQUEST_FILENAME}!-dRewriteCond%{REQUEST_FILENAME}!-lRewriteRule^(.+?)/?$/index.php?
我已经将sitemap.xml文件提交给谷歌网站管理员工具,它说我拥有整个页面,但在“索引”下它说“--”?Google需要多长时间才能开始编制索引?这是几天前的事。 最佳答案 站点地图是网站管理员帮助搜索引擎轻松地从他们的网站发现更多页面的一种方式。站点地图应被视为一种帮助,而不是一种职责。即使您提交了Sitemap,也不能保证Sitemap中列出的URL会被读取或包含在搜索引擎索引中。通常需要几小时到几天才能编入索引。来自Google来源的引述"Wedon'tguaranteethatwe'llcrawlorindexallof
我有一个要在生产环境中设置的Angular应用程序。正如我所读到的,谷歌现在能够通过AJAX页面进行抓取。我正在检查我将如何使用FetchasGoogle服务。虽然主页在所有主流浏览器中都正确呈现,但FetchasGoogle返回空白页面,没有编译任何Angular指令,也没有错误。我正在使用HTML5模式和ui-router。文件由node.js应用服务器提供(我曾尝试从nginx提供文件,结果是一样的)并且robots.txt允许所有文件。脚本被连接和缩小。控制台中没有错误。FetchasGoogle服务返回的代码:!doctypehtml>Youareusinganoutdate
Googlebot偶尔会使用错误的查询字符串参数为我们的网站之一编制索引。我不确定它是如何获取此查询字符串参数的(似乎没有任何网站通过错误链接链接到我们,并且我们网站中没有任何内容插入错误值)。如我们所料,错误的参数会导致站点抛出500错误。我的印象是Google不会为返回500错误的页面编制索引,但事实证明确实如此。所以现在我有两个问题:1)为什么Googlebot会随机插入错误的查询字符串值?(我真的不关心这个问题的答案,但如果我们能做些什么来避免这种情况,它就会解决我们的问题。)2)为什么Google会将返回500错误的页面编入索引?这是Googlebot创建并已编入索引的错误链
如果我只想让爬虫访问index.php,这行得通吗?User-agent:*Disallow:/Allow:/index.php 最佳答案 是的,它会起作用。这是来自GoogleWebmasterTool的测试结果.Urlhttp://www.example.org/index.phpGooglebotAllowedbyline3:Allow:/index.phpGooglebot-MobileAllowedbyline3:Allow:/index.php但是,请记住,如果使用此配置,您的网站主页将不会被抓取,除非使用完全限定路径访
是否可以将对Google的指令微调到忽略页面的一部分但仍将其余部分编入索引的程度?我们遇到了几个不同的问题,这些问题会得到帮助,例如:页面上显示外部来源内容的RSS提要/新闻行情类型文本输入联系电话等详细信息的用户希望他们在网站上可见但不希望他们无法通过谷歌搜索我知道以上两个问题都可以通过其他技术解决(例如用JavaScript编写内容),但我想知道是否有人知道Google是否已经提供了更简洁的选项?我一直在对此进行一些挖掘,并提到了googleonandgoogleofftags,但这些似乎是GoogleSearchAppliances独有的。有谁知道是否有一组类似的标签可供Goog
我已经阅读了有关站点地图格式的Google文档,但有一件事他们没有说清楚:搜索引擎会自动寻找并找到/sitemap_index.xml还是您必须通过/robots.txt或主/sitemap.xml告诉他们?您是否可以不拥有/sitemap.xml并仍然依赖/sitemap_index.xml来找到和收获? 最佳答案 在您的robots.txt中,您可以使用相同的语法指向站点地图或站点地图索引文件:Sitemap:搜索引擎会通过查看文件知道它是什么类型。还值得注意的是,sitemap.xml和sitemap_index.xml只是建
我正在开发基于Angular2的网络应用程序。我使用AngularCLI生成应用程序,然后为产品构建它。我在AWSS3和Cloudfront上托管了网站。当我使用网站管理员提供的“FetchasGoogle”工具时,它只显示Loading...。Googlebot无法抓取我的网站吗? 最佳答案 有类似的问题。我相信Google-Bot不支持现代JS。我只是激活了angular.io推荐的所有垫片,请参阅https://angular.io/docs/ts/latest/guide/browser-support.html并在脚本头中
我有我的主要申请网站https://drchrono.com,我在http://blog.drchrono.com下有一个博客子域.一些博主告诉我,您网站的博客子域有助于提高主网站的网页排名。您的博客子域的流量是否有助于您网站的GooglePageRank并计入您的主网站的流量? 最佳答案 我认为Google不会对名为“blog”的子域给予任何特殊待遇。如果他们这样做了,那将为虐待敞开大门,而且他们足够聪明,可以意识到这一点。我曾一度认为将您的博客放在一个单独的子域中是有好处的。如果您的博客的网页排名不错,那么从您的博客到主站点的链