Robots.txt 的形成

[hasinam2206]

对于 Google，创建一个以User-agent: Googlebot（用于主机器人）和User-agent: Googlebot-Mobile（用于移动机器人）开头的命令块。使用“以 Googlebot 身份查看”功能来分析 Google 如何看待您的网站，并使用 Allow: 指令打开样式表、脚本、图像和字体文件以进行索引。

接下来写入Host和Sitemap。

顺便说一句，如果您对此感到厌倦，只需委托他 阿曼移动数据库 人优化您的网站即可。。

20.附件设置
这里你应该检查所有能带来流量的页面的嵌套层级。最好在靠近主页的地方或者通过链接创建频繁目标查询的页面。

创建任务来配置 HTML 站点地图
如果搜索引擎应该在从主页两次点击内访问任何重要页面（并且只有三次或更多次点击才能访问），则创建信息请求以创建 HTML 站点地图。写下对 SEO 来说重要的页面的树状结构和链接。在页脚或底部菜单中放置 html 格式的站点地图链接。

21. 分页设置
为了正确索引网站并进一步避免分页页面（页面细分）上重复内容的问题，有必要使用 rel =“next” 和 rel =“prev” 属性以及 rel =“canonical” 属性。因此，您会向搜索引擎表明该网站具有重复内容，同时考虑到网站内部结构的具体情况。

分页设置的示例。