什么是 #robots-txt MCP 服务器?
标记为 #robots-txt 的 MCP 服务器实现了 Model Context Protocol,让 Claude、Cursor、VS Code 等 AI 助手可以访问 robots-txt 相关的工具、数据或 API。
以下 MCP 服务器和客户端均标记为 #robots-txt——安装后即可让 Claude、Cursor、VS Code 等支持 MCP 的客户端获得 robots-txt 相关能力。
krissanders
MCP server that audits AI-bot visibility. Reports per-bot robots.txt verdicts for 22 AI user-agents (GPTBot, ClaudeBot, PerplexityBot, Google-Extended, etc.), Cloudflare AI-default flags, on-page schema, sitemap, llms.txt, SPA-shell detection, and cross-model brand mentions via P
BACKLNK
Free technical SEO, AEO, LLMO and GEO checks for AI agents: check a page, fix it, then verify the fix. Evidence for every finding, most important first. Remote MCP server, free API key.
zerhal
Free SEO audit MCP server. Analyze meta tags, headings, broken links, robots.txt, and competitor pages directly from Claude, Cursor, or Windsurf. No API key needed.
关于 #robots-txt 标签下 MCP 服务器和客户端的常见问题
标记为 #robots-txt 的 MCP 服务器实现了 Model Context Protocol,让 Claude、Cursor、VS Code 等 AI 助手可以访问 robots-txt 相关的工具、数据或 API。
mcp.so 目前收录了 3 个标记为 #robots-txt 的 MCP 服务器和客户端。
打开下方任意服务器页面,将安装配置复制到 Claude Desktop、Cursor、VS Code 或其他 MCP 客户端的配置中即可——远程服务器无需单独下载。