- 通过gatsby-plugin-sitemap插件为每个md页面设置唯一和描述性的 title description keywords 描。
- 确保 Robots.txt 文件正确设置以控制搜索引擎爬虫的访问。
- 优化图像并减小文件大小
- 搜索内容高亮标记关键次
- h1~h6标签的合理使用(h1标签在一个页面上最多只能出现一次,h2标签通常用作文章的二级标题或副标题。如要使用其他h3-h6标签,应按顺序逐层嵌套,不能打断或颠倒。)
- 设置图片的alt属性,让爬虫抓取信息
- a标签的title属性其实就是提示文字的作用
- 404页面, 爬虫不会因为页面错误而停止爬取