Discuz! Board

標題: 页面 HTML 头部的元 robots [打印本頁]

作者: kanesal203 時間: 2025-3-4 14:47
標題: 页面 HTML 头部的元 robots
在 Squarespace 上，可以通过 SEO 设置或代码注入添加 noindex 标签：

通过页面的 SEO 设置：这是首选方法，因为 Squarespace 会从您的站点地图中删除 URL。理想情况下，站点地图仅包含您希望搜索引擎索引的 URL。

在Squarespace 上实施 SEO时，许多甚至大多数网站都会希望不索引类别和标签页面，以优化搜索引擎抓取网站的方式，此选项可在博客页面的 SEO 设置选项卡上使用。

通过代码注入：此选项曾经是唯一可用的方法。使用此方法，URL 仍包含在站点地图中。将以下代码行放入代码注入中：

<meta name="robots" content="noindex">
单个页面：将鼠标悬停在要保护的页面上，然后单击页埃及电话号码表面的“设置”图标 > 单击“高级”，使用页面标题代码注入

所有页面：访问网站工具 > 代码注入 > 使用 Header

注意： Google 和 Bing 等主流搜索引擎通常会尊重 noindex 标签，但这并非万无一失的方法，因为并非所有网络爬虫都遵循这些指令。如果 noindex 页面链接到其他高质量页面，noindex 页面的 URL 仍会出现在搜索结果中，直到被删除。

Robots.txt 文件
Robots.txt文件指导搜索引擎可以抓取或不可以抓取的内容。在 Squarespace 上，您无法在 robots.txt 中指定要排除的目录或页面，但如果需要，您可以阻止搜索引擎抓取工具（和 AI 抓取工具）抓取整个网站。在这种情况下，即使您的站点地图已填充，搜索引擎也会首先遇到 robots.txt，因此它们将停止并且不会抓取您网站上的任何页面，这意味着站点地图将被忽略。

请记住：如果从其他地方链接，被禁止的页面仍然可以被索引。如果某个网站已被索引，请先从索引中删除该页面，然后阻止抓取。

内容删除工具
如果内容已在 Google 索引中，而您想将其删除，则可以使用 Google 的URL 删除工具。 URL 通常会在 24 小时内删除。这只能提供临时解决方案 - 若要永久删除，请结合删除或禁用内容、阻止访问或添加 noindex 标签。

请参阅 Google 的删除工具和 Bing 的删除工具。

歡迎光臨 Discuz! Board (http://kte.ibbs.tw/)