Perplexity 是一个会写出答案并加脚注的搜索引擎。每个回答都链接来源,所以问题不在于它是否引用别人,而在于它是否引用你。以下根据 Perplexity 自己的文档,说明它如何找到页面。
Perplexity 表示它用 AI 来 “search the internet in real-time”,并且 “each answer includes numbered citations linking to the original sources”(Perplexity 帮助中心)。Perplexity 首先把自己定位为搜索,答案写在结果之上。这使它成为各助手中最像搜索引擎的一个:它今天能找到和抓取什么,就决定了它说什么。
| User agent | Perplexity 对其作用的说明 | robots.txt | 屏蔽它的头部网站 |
|---|---|---|---|
PerplexityBot | 在 Perplexity 的搜索结果中展示并链接网站;不用于训练基础模型 | 允许它,才能出现在结果中 | 8.9% |
Perplexity-User | 当用户的问题需要时访问页面,并可能在回答中链接它 | 由于是用户请求,“Generally ignores robots.txt rules” | 6.0% |
描述来自 Perplexity 的爬虫文档。屏蔽占比基于 Tranco 前 10,000 的 4,762 个 robots.txt,于 2026年10月28日读取(方法)。
头部网站屏蔽 PerplexityBot 的次数超过任何其他 AI 搜索爬虫:4,762 个中有 425 个,在前 1,000 中升至 12.1%。包括 Yahoo 和 Prime Video 在内的几家大网站屏蔽了 PerplexityBot,却没有动 OpenAI 和 Anthropic 的搜索爬虫。这是它们有权做出的选择;只要确保你自己的屏蔽(如果有)也是一个有意的选择。
Perplexity 还要求位于 Web 应用防火墙后的网站,同时按用户代理和其公布的 IP 范围放行这两个爬虫,并提醒更改可能需要最多 24 小时才能生效。
perplexity.com/perplexitybot.json 公布的 IP 列表对照。在 Mentioned 中,Perplexity 用你自己的 API 密钥运行,Claude、ChatGPT 和 Gemini 用我们的密钥。一次检查会就你的品类提出五个买家问题,并保存完整回答及其来源,让你看到 Perplexity 依赖哪些域名、你的是否在其中。至于引荐流量,Perplexity 的访问在 GA4 中以它自己的域名出现;这份指南提供了筛选方法。
相关:Claude、ChatGPT、Gemini、Google AI Overviews 和 Copilot。
Perplexity 表示它实时在网上搜索权威来源,并在每个回答中加上编号引用。它没有公布排名公式。实际上,页面必须能被 PerplexityBot 抓取,并清楚回答问题,才有资格成为候选。
Perplexity 建议在 robots.txt 中允许 PerplexityBot,以便出现在其结果中。根据 Perplexity 的爬虫文档,它的用户触发抓取器 Perplexity-User 通常会忽略 robots.txt,因为是有人请求了该页面。
在我们 2026年10月对 Tranco 前 10,000 的抓取中,robots.txt 可读的 4,762 个网站里有 8.9% 在首页禁止 PerplexityBot,高于任何其他 AI 搜索爬虫。