容,这对于移动来说至关重要。虽然尚不清楚谷歌在搜索结果中是否优先考虑加速移动页面而不是其他类型的移动页面,但更快的加载时间可能有助于提高排名。使用 rel=指向页面 手机号码大全列表 的 AMP 版本,使用 rel=canonical 指向 AMP 页面的规范 URL。请注意,即使 托管在 Google URL 上,它们仍会使用您的抓取预算。你应该阻止坏机器人吗?不幸的是,使用机器人的不 手机号码大全列表 仅仅是搜索引擎。它们有各种形状和大小......和意图,包括那些旨
在破解、间谍、垃圾邮件以及通常在您的网站上做讨厌事情的人。与友好的搜索引擎爬虫不同,这些蜘蛛更有可能忽略你的所有指令,直接进入颈静脉。您仍然可以 手机号码大全列表 使用一些技巧来阻止不良机器人。请注意,这些黑客攻击可能需要时间,因此如果您真的很挣扎,可能值得向您的主机咨询他们的安全解决方案。 1. 使用 阻止 Internet 协议 (IP) 地址。阻止坏机 手机号码大全列表 器人就像为您要阻止的每个机器人添加一个“拒绝”规则到您
的 文件中一样简单。当然,这里最棘手的部分是弄清楚机器人正在使用哪个 IP 地址。有些机器人甚至可能使用多个不同的 IP 地址,一系列地址。您还需要确保您没有阻止合法的 IP 地址。除非您有要从可靠来源阻止的已知 IP 地址列表,或者您不知道 bot 访问的页面以及服务器 手机号码大全列表 的大致时间或地理位置,否则您可能会花费数小时搜索您的日志文件。 2. 使用 来阻止用户代理字符串。另一种选择是为特定的用户代理字符串配置“拒绝”规则。同样,您需要一个来自受信 手机号码大全列表 任来源的列表,或者您将整理日志