使用自定义 User-Agent 模拟搜索引擎蜘蛛访问公网网页，展示响应状态、标题、主要元数据与响应头，便于检查差异化返回。
仅允许访问公网 HTTP/HTTPS 地址，内网、回环和链路本地地址会被拒绝。