在Google上做seo，如何更新robots.txt文件

原创文章
声明：作者声明此文章为原创，未经作者同意，请勿转载，若转载，务必注明本站出处，本平台保留追究侵权法律责任的权利。
全栈老韩
全栈工程师，擅长iOS App开发、前端（vue、react、nuxt、小程序&Taro）开发、Flutter、React Native、后端（midwayjs、golang、express、koa）开发、docker容器、seo优化等。

摘要

在我做过的很多web项目的seo中，特别喜欢Google的seo，因为真的是速度快而且人性化。最讨厌国内的seo，简直反人类，各种要参与搜索引擎的某些营销计划才能提交爬虫相关，速度慢，要求还贼多。饭馆Google的爬虫，没有那么多要求，还没有付费排名，真的是web的福音。

这篇文章简单的说一下如何更新Google上的robots.txt文件。

步骤

  1. 直接进入谷歌搜索，登录谷歌账号；
  2. 要么输入site:baidu.com（将baidu.com替换成你自己的网站域名），谷歌搜索一下，在搜索结果页，就可以看到谷歌的提示
    Google的site搜索
    点击就可以进入Google搜索管理控制台
  3. 或者你直接进入网址：Google Search Console
  4. 更新robots.txt的地方在Setting（也就是设置）中。
    Google的robots.txt位置
  5. 点击OPEN REPORT进入
    Google的robots.txt文件
  6. 点击文件右侧的更多图标
    请求爬取robots.txt
  7. 直接点击“Request a recrawl”重新爬取即可。

附录

附上Google的robots.txt相关操作官方记录：https://support.google.com/webmasters/answer/6062598?hl=zh-Hans

发布于2024-08-12 02:42:47
浏览量764·

暂无评论，快来发表第一条评论吧