YIem`s Blog -心比天高命比纸薄-链接找不到的请在站内搜索内容！ - 苹果Siri爬虫
Applebot苹果蜘蛛，Applebot苹果爬虫，Applebot 是 Apple 的网络爬虫工具，Siri 和“聚焦建议”等产品都会使用 Applebot
Applebot苹果蜘蛛，Applebot苹果爬虫，Applebot 是 Apple 的网络爬虫工具，Siri 和“聚焦建议”等产品都会使用 Applebot识别 ApplebotMozilla/5.0 (Macintosh; Intel Mac OS X 10_10_1) AppleWebKit/600.2.5 (KHTML, like Gecko) Version/8.0.2 Safari/600.2.5 (Applebot/0.1)自定 Applebot 的规则Applebot 遵循以 Applebot 为目标的标准 robots.txt 指令。在以下示例中，Applebot 不会尝试抓取 /private/ 或 /not-allowed/ 下方的文稿：User-agent: Applebot # 特定apple搜索引擎蜘蛛 Disallow: /private/ # disallow this directoryUser-agent: * # 所以 搜索引擎蜘蛛 Disallow: /not-allowed/ # disallow this directoryApplebot 支持 HTML 文稿中的机器人元标签。要指定元标签中的机器人规则，请将标签置于文稿的 部分（如下所示）： ... ... Applebot 还支持以下指令：noindex：Applebot 不会针对这个页面创建索引，也不会出现在“聚焦建议”或“Siri 建议”中。nosnippet：Appletbot 不会生成页面描述。所有示意访问这个 URL 的建议都仅包含页面的标题。nofollow：Applebot 不会打开页面上所示的任何链接。none：如上所述，Applebot 不会针对页面创建索引、生成片段或打开页面上所示的链接。all：Applebot 会提供建议文稿并生成内容片段，以在代表性图像旁边显示有关页面的简短描述。Applebot 可能会打开页面上所示的链接，以提供更多建议。要将多个指令置于单个元标签中，请使用以逗号分隔的列表或使用多个元标签。下面是一些示例： 以及