为什么页面使用不可索引的标签进行索

[kexej28769@nongnue]

答案就在这篇文章中。这是一件令人头疼的事情。

开发人员在头部安装了一些广告技术，并插入了一个非标准标签，意思是“不”：

这导致头部过早过期，并在未读取的身体中留下非索引标签。

4. 为什么网站上的任何页面在 20-50% 的情况下会返回 302，但只返回给爬虫？

我花了一段时间才弄清楚这一点。客户有一个旧的旧 格鲁吉亚 WhatsApp 数据 网站，有两台服务器，一台用于博客，一台用于网站的其余部分。在博客从子域 (blog.client.com) 移动到子目录 (client.com/blog/…) 后不久，问题就开始出现。

从表面上看，一切都很好。如果用户请求单独的页面，那么一切看起来都很好。对所有博客 URL 进行爬网以检查它们是否已重定向，效果很好。
跳出率基本上是访问某个页面然后离开您的网站、访问该页面后不再继续访问该网站上的另一个页面的用户的平均百分比。

每次访问的页面基本上正如其听起来的那样，即访问该特定页面的用户每次访问的平均页面数。那么浏览其中某一页面的人浏览了我网站上的多少页面？

那么现场时间基本上是一个非常粗略和原始的指标。如果我离开计算机去洗手间，或者我基本上切换到另一个选项卡或关闭浏览器，这并不一定意味着网站停留时间会在此时结束。所以这个指标存在很多缺陷。现在，随着时间的推移，它的方向仍然很有趣。