LLM支持

基本能力 产品定位 Crawl4ai MCP Server 是一个专为LLM设计的网页爬取服务，能够高效地抓取网页内容并将其转换为Markdown格式，便于后续处理和分析。 核心功能 网页爬取：支持多URL同时爬取，返回带有引用的Markdown内容。 自动重试：在遇到网络问题时自动重试，提高爬取成功率。 用户代理切换：避免被目标网站屏蔽。 支持认证：可选配置认证令牌以访问需要认证的API服务。 …