跳至主要内容

外贸网站的robots怎么写

Robots虽然是网站的一个很基础的东西,但依然有很多朋友不知道这是做啥用或怎么写,今天就来讲讲什么是robots,以及外贸网站的robots写法

1. Robots到底是什么

robots是在网络爬虫(像GG蜘蛛)之间通行的一个协议,robots设置哪些蜘蛛可以爬取哪些页面,不可以爬取哪些页面,它没有法律效力,完全靠自觉。它放在robots.txt这个文档中。

2. 网站robots怎么写

网站禁止收录和禁止爬取
在建立起WP网站第一步,就要写好,因为你的网站还没完成,不适合收录
User-agent: *
Disallow: /
网站开放收录和爬取
一般来讲,网站的robots写法没有标准的答案,因为它是一个开放的内容,目的就是为了告诉可以做什么,不可以做什么,所以这个完全由你来决定。
专业的SEO插件YOAST SEO最近的文章显示,不用限制什么,相当于裸奔。
特别是AVADA主题做的网站,如果有一点限制在google站长工具后台就会提示报错,所以都开放网站收录,放开的robots如下。
User-agent: *
Allow: /

3. robots文件放哪里

robots.txt这个文件写好内容后,直接上传到网站根目录即可,即跟wp-admin,wp-content,wp-includes同一路径可。
比例简单快捷的方法就是使用yoast seo插件的编辑功能,可以在线编辑robots,非常方便,具体使用方法可以参考yoast seo插件使用

4. Robots禁止收录了,那别人就看不到我的网站么?

错,robots是网络协议,对网络爬虫起作用,对人不起作用。
要想别人看不到你的网站--安装under construction插件,启用即可屏蔽你的网站
要想网站不收录 -- 写好robots,并将robots.txt放到你的网站根目录下面即可

评论

此博客中的热门博文

土豪专用!Google企业邮箱申请试用及购买方法(含20%折扣码)

Google企业邮箱应该是全球数一数二的企业邮箱了,毕竟google是世界级的公司,它提供的邮箱服务也不会差,不过费用方面比国内的企业邮箱要贵不少,一个账号5USD/月,50USD/年。不过好在google企业邮箱提供了14天,包含10个账号的免费试用期,而且是不用添加付款方式的,这一点还算比较厚道,给潜在客户一个了解的过程。今天就来讲下,如何申请及设置购买谷歌企业邮箱。另外在付款的时候,填上本文中的折扣码,即可获得第一年20%的折扣。原文链接: google企业邮箱购买 前言 Google企业邮箱是属于Google G suite服务中的一个。这个服务中包含了企业邮箱,存储等业务。不过对于外贸人来说,个人觉得最有用的应该还是邮箱服务。像存储等,由于网络原因,并不实用。 下面介绍具体操作方法 另外,如果你还没有域名,需要先买一个域名,建议在 外贸域名购买平台namesilo 上购买 1.申请G suite账号 进入 google G suite官网  ,点击开始免费使用,再点击下一页 接下来填好你企业名称和企业人数,并点下一页 接下来选择你的公司地址,注意这里一定要填香港,因为没有中国这个选项(目前未对大陆开放G SUITE服务) 这里填常用的邮箱地址,一般填你最常用的gmail邮箱即可,不要填企业邮箱 直接选择我有域名即可,如果还没有域名,可以先到 namesilo购买域名 ,再填这里 填上你已经有的需要使用企业邮箱的域名,并点下一页 填上你的姓名,并点下一页 设置一个企业邮箱的管理员账号和密码(自己在本地保存好),并点下一页 向google提意见,直接选择不就行 勾选人机验证,并点击同意并创建账号即可 那么G Suite账号已经创建完成了。可以点击转到设置进行下一步。 2.添加邮箱用户并验证域名所有权 接上一步,如下图所示,点击开始添加账户 如下图所示,添加账号姓名和邮箱账号,试用账号最可以添加10个账号 接下为是验证域名所有权,有几种验证方法,最简单的就是meta标签来验证,复制那一段元标记,放到你的网站头部</head>之前即可。 以AVADA主题的网站为例,进入WP后台- AVADA - them...

怎么样在foxmail上加载gmail邮箱(2017最新方法)?

Gmail和foxmail都是外贸人非常常用的两种工具,但是由于gmail严格的安全设置,导致很多朋友在foxmail上面无法使用gmail,今天Hunk就来分享下怎么样在foxmail上加载gmail邮箱,只需4步即可搞定!原文,  foxmail设置gmail 的方法 本文使用的工具: gmail账号一个, foxmail 7.2, 科学上网 方法如下: 1.Gmail开启两步验证功能 进入 gmail开启两步验证 页面,它依次验证你的gmail邮箱密码和手机,只要按提示完成验证即可,非常简单,详细步骤如下图 看到如下提示就说明gmail两步验证成功开启。 2. 获取应用专用密码 进入 申请应用专用密码 页面, 还是按提示依次完成并申请到应用专用密码,这个密码将作为你在foxmail上加载gmail的密码,步骤截图如下 复制并保存生成的应用专用密码,后面会用到这个密码。 3.设置gmail的收件服务器 gmail账号的imap/pop收件服务器默认是不开启的,所以要到gmail网页版后台去设置下,先进入gmail后,再点右侧的设置 点击转发和POP/IMAP,我们只开启POP,选择对所有邮件启用POP,IMAP默认不开启,设置如下图,设置完以后保存即可。 4.在foxmail软件上加载Gmail账号 打开foxmail,点击右侧设置图标,并点击账号管理 点击新建 输入gmail和应用专用的密码,再点创建即可成功。 然后把收件服务器改成pop即可,如下图 5. foxmail设置网络代理 曾经有一段时间不需要这一步就可以使用的,但是最近由于19大快召开了,各种出国网络都不好使,所以现在必须要FQ才可以使用,如果没有好的FQ工具,推荐还不错的 科学上网站工具 ,设置FQ成功之后,再进行以下设置 进入foxmail系统设置菜单,点击网络,选择自定义代理设置, 服务器 填 127.0.0.1 端口 填你的SS小飞机的端口 用户ID 可以不填 密码 填你的SS小飞机的密码 设置好,确定。 然后把小飞机启动系统代理,并把系统代理模式选择全局模式。 即可使用foxma...

外贸域名购买-namesilo上购买域名(含优惠码)

Namesilo是目前域名价格较便宜的外贸域名购买平台,它支持支付宝,PAYPAL,VISA等多种付款方式,还 免费使用域名隐私保护 ,今天就来介绍下怎么在namesilo上购买外贸域名,原文 namesilo优惠码 注意 :是namesilo,不是namesiol 或 nameliso 或 Nameslio 1.首先到进入 www.namesilo.com  注册一个账号 2.再进入到首页,在domain search框中输入你的域名,并点击search 3.搜索后会出来一系列不同的后缀的结果,绿色代表可以注册,将你需要的域名打上勾即可,并点击register checked domains 4.接下来会跳转到购买页面,你可以设置你需要购买的时间等,另外,在promotion code那里输入hunk这个优惠码,并点submit即可优惠1USD ( 只有新账号的第一个域名才能优惠 ),设置完了以后点击continue 5.接着会跳转到付款页面,有多种付款方式可以选择,最方便的就是支付宝了,选择支付宝,并输入你的支付宝账号,点击GO 6.接着会跳转到支付宝页面,这样你用手机支付宝扫一下即可完成付款。 7.付款完了以后会有邮件发送到你的注册邮箱。 8. 后续操作 如果你要购买空间,参考 3步购买Linode空间(含优惠码) 或   bluehost空间购买方法 如果要设置空间解析,可以查看 namesilo,godaddy, 万网 DNS中设置A记录 如果要建立企业邮箱,可以参考 免费腾讯企业邮箱、网易邮箱的设置 ,或 ZOHO企业邮箱申请及设置 ,或 google企业邮箱试用及购买