您应该在您的网站上拥有 文件的原因您有不想与搜索引擎共享的数据。您使用需要针对搜索引擎的特殊说明的付费链接或广告。您只希望像 这样的授权机器人访问您的网站。您使用网站创建并 实时 更改它因此您不希望机器人索引未完成的版本。 可帮助您遵循 制定的准则。机器人 文件不需要出现在您的网站上的原因没有机器人。 文件您消除了可能对您的网站在搜索引擎中的。
这当然是正常和常见的所以
排名产生负面影响的潜在错误。您没有要从搜索引 澳洲华人电话号码表 擎中隐藏的文件。在此如果您没有 文件搜索引擎可以完全访问您的网站。没有什么可建 文件是儿戏。这样的文件是纯文本文件这意味着您可以使用系统上最常见的记事本或任何其他文本编辑器。所以你可以这样看我不是在创建 文件我只是在写一个简单的注释说明及其含。
担心的如何创建机器人创
现在您知道了 是什么您需要学习如何正确使用它。 用户代理 KY 列表 用户代理 用户代理 说明用户代理语法定义了索引机器人话。这可以通过两种方式完成。如果要报告所有机器人请添加 （星号。 这种写法是这样说的 每个机器人都应该朝这个方向走。 如果您想向特定机器人（例如 报告某些内容则符号看起来像这样 这一行表示 这些说明仅适用于。
