robots.txt / sitemap.xml 生成 站点根地址 抓取规则允许全部抓取禁止全部抓取自定义路径 Sitemap URL 列表https://weekeebu.top/ https://weekeebu.top/tools/ https://weekeebu.top/tools/document-tools.html https://weekeebu.top/tools/dev-tools.html每行一个完整 URL,生成 sitemap.xml。 自定义 robots 路径Disallow: /tmp/ Disallow: /private/选择“自定义路径”时会写入这里的规则。 生成 robots 和 sitemap复制 robots复制 sitemap下载 sitemap robots.txt sitemap.xml