网页抓取

概述

web_fetch 工具从一个 URL 获取内容并以文本形式返回。适合在对话中阅读文档、检查 API 响应或抓取网页内容。

参数	类型	必填	说明
`url`	string	是	要抓取的 URL
`max_length`	integer	否	返回的最大字符数（默认 10,000）

抓取一个文档页面：

{
  "url": "https://doc.rust-lang.org/std/vec/struct.Vec.html"
}

带上限地抓取 API 响应：

{
  "url": "https://api.github.com/repos/pdg-global/rusty/releases/latest",
  "max_length": 5000
}

web_fetch 工具包含针对服务器端请求伪造（SSRF）攻击的多层全面防护：

仅允许 http 与 https 协议。file://、ftp://、data:、gopher:// 等协议会被拒绝。

拒绝 localhost、*.localhost、*.local 及其变体。

阻止以下地址范围：

工具会解析主机名、固定解析出的 IP，并拒绝那些 DNS 解析到私有或黑名单地址的请求。它为每次请求构建一个带 resolve() 覆盖的客户端，以防止 DNS 重绑定攻击。

每个重定向目标在被跟随前都会对照完整黑名单重新检查。这可防止攻击者在初次有效请求后重定向到内部服务。