在经历上述过程时我们发现客户的产

rosemardi604

下一步是检查应排除的的索引状态。谷歌是否足以将所有这些内容排除在索引之外或者是否有一些内容被纳入索引如果没有将大量此类内容编入索引您可以考虑调整文件以立即阻止抓取。如果没有标签规范和密码保护页面都在桌面上。案例研究重复的用户生成内容举一个现实世界的例子这是我们在客户端站点上诊断问题的实例。该客户端类似于电子商务网站因为它们的很多内容都是由产品描述页面组成的。然而这些产品描述页面都是用户生成的内容。

本质上第三方可以在该网站上创建列表。然而第三方经常在其页面中添加非常 俄罗斯电报号码数据 简短的描述导致内容稀疏。经常发生的问题是这些用户生成的产品描述页面被困在已爬网目前未编入索引报告中。这导致错失了机会因为能够产生自然流量的页面被完全排除在索引之外。品描述页面的独特内容非常薄弱。被排除的页面似乎只有一段或更少的独特文本。此外大部分页面内容是所有这些页面类型中都存在的模板文本。




由于页面上几乎没有独特的内容因此模板化内容可能会导致将这些页面视为重复项。结果是谷歌将这些页面从索引中排除理由是已爬网目前未编入索引状态。为了解决这些问题我们与客户合作确定每个产品描述页面上不需要存在哪些模板化内容。我们能够从数千个中删除不必要的模板化内容。这导致已爬网目前未编入索引页面显着减少因为开始认为每个页面都更加独特。