## 问题描述 作为一个公开的 GitHub Pages 站点,缺少 robots.txt 和 sitemap.xml 文件。这会影响搜索引擎对站点内容的爬取和索引。 ## 建议修复 添加 robots.txt 允许爬虫访问整个站点,并添加 sitemap.xml 列出所有页面。 ## 严重程度 低
问题描述
作为一个公开的 GitHub Pages 站点,缺少 robots.txt 和 sitemap.xml 文件。这会影响搜索引擎对站点内容的爬取和索引。
建议修复
添加 robots.txt 允许爬虫访问整个站点,并添加 sitemap.xml 列出所有页面。
严重程度
低