Google dit ce qui existe. Faceabot dit ce qui tient.
robots.txt group count
Connexion MCP :https://agent-observatory-sensor.nolimit-observatory.workers.dev/s/robots-count/mcp · site · mesures et détailsFetch a public robots.txt and return group counts only.
Connexion MCP :https://agent-observatory-sensor.nolimit-observatory.workers.dev/s/robots-inspect/mcp · site · mesures et détailsrobots.txt Allow count, body discarded
Connexion MCP :https://agent-observatory-sensor.nolimit-observatory.workers.dev/s/robots-allow-count/mcp · site · mesures et détails{"jsonrpc":"2.0","id":1,"method":"tools/call","params":{"name":"whoami","arguments":{}}} free no key
Connexion MCP :https://www.pathwren.workers.dev/c/mcp-registry-official/mcp/robots · site · mesures et détailsChecks if a URL path is allowed by robots.txt. x402 payment required (testnet USDC).
Connexion MCP :https://faceted-napped-debtless.ngrok-free.dev/robots-txt-checker/mcp · mesures et détailsChecks robots.txt line by line and says what each AI crawler token actually controls - training, AI
Paquet npm :@readystack/robots-txt-ai-crawler-audit · site · mesures et détailsCheck AI crawler robots.txt policy and monitor public-site policy, sitemap, and llms.txt changes.
Connexion MCP :https://actablesite.com/mcp/ · site · mesures et détailsURL to clean markdown for LLMs: a polite, robots.txt-respecting web reader. Free, no API key
Connexion MCP :https://agent-web.foomworks.workers.dev/mcp · site · mesures et détailsllms.txt 檢查工具：檢查網站的 llms.txt、robots 與 sitemap。台灣繁體中文 MCP 工具。
Connexion MCP :https://llms.penguindriver.com/mcp · site · mesures et détailsDelegate 20 typed RQM Robotics jobs for validation, diagnosis, comparison, and optimization.
Connexion MCP :https://jobs.rqmtechnologies.com/mcp/robotics · site · mesures et détails檢查網站 llms.txt 與 AI 爬蟲 robots.txt 設定，並自動產生 llms.txt。
Connexion MCP :https://llms-check.panda198271.workers.dev/mcp · site · mesures et détailsMarket & supply-chain intelligence on 34 humanoid robots: scores, specs, pricing. No key.
Connexion MCP :https://mcp-free.roboselect360.com/mcp · mesures et détailsSEO tools for AI agents: audits, Core Web Vitals, keywords, AI visibility, traffic, backlinks.
Connexion MCP :https://www.robot-speed.com/api/mcp · site · mesures et détailsCheckout-verified prices, stock, US FCC status and buy routes for humanoid and quadruped robots
Connexion MCP :https://mcp.botinfo.ai/mcp · site · mesures et détailsVendor-neutral catalog of 300+ commercial robots: search, compare specs, request vendor intros.
Connexion MCP :https://robohub.app/api/mcp · site · mesures et détailsFX and metals market data: plans, 51 symbols, price quotes, and candles with an API key.
Connexion MCP :https://api.adona-robot.com/mcp · site · mesures et détailsDoes a site publish llms.txt, robots permissions and a sitemap agents can use? Bounded check.
Connexion MCP :https://agent-observatory-sensor.nolimit-observatory.workers.dev/s/llms-txt-readiness/mcp · site · mesures et détailsFinds the robots.txt lines that reserve nothing — retired crawler tokens, shadowed groups, rules abo
Paquet npm :@readystack/tdm-reservation-lint · site · mesures et détailsChecks llms.txt, AI crawler access in robots.txt, and sitemap - with a 0-100 AI readiness score.
Connexion MCP :https://mcp.apify.com?tools=apifmcpfactory/llms-txt-checker · site · mesures et détailsToken compression for web content — 70-80% reduction from HTML to clean markdown
Paquet npm :@robot-resources/scraper-mcp · site · mesures et détailsIA : tout ceci est disponible sans clé via MCP https://faceabot.com/api/mcp · HTTP https://faceabot.com/api/catalog?q=… · Guide : llms.txt
Pulse : ce qui change dans le commerce par agents · Votre boutique est-elle prête pour les agents acheteurs ? · État hebdomadaire des outils · Docteur pour créateurs de serveurs MCP · Données ouvertes de fiabilité · Ajouter Faceabot à votre IA · Aide · Confidentialité · Conditions