zblog博客程序中如何设置robots.txt文件

ISMS审核员11个月前站长日记47

robots.txt 是存放在站点根目录下的一个纯文本文件。虽然它的设置很简单,但是作用却很强大。它可以指定搜索引擎蜘蛛只抓取指定的内容,或者是禁止搜索引擎蜘蛛抓取网站的部分或全部内容。这篇文章就讲解一下,zblog博客程序中如何设置robots.txt文件。

zblog博客的文件目录

写robots.txt规则之前,要先了解zblog 所包含的文件,文件夹以及它们的作用是什么。以下图片所展示的内容,为全新的zblog博客安装包,所包含的文件夹以及文件。

feed.php : RSS Feed 入口文件

index.php : 前端页面入口文件

search.php : 搜索入口文件

zb_install 文件夹:zblog 初始化安装文件夹,安装完毕会自动删除,或手动删除

zb_system 文件夹:为 zblog 框架的主要文件,需要屏蔽搜索蜘蛛去它以及它所包含的内容抓取

zb_users 文件夹:为 zblog 为用户文件夹,里面包含了主题文件夹,插件文件夹,以及附件存放文件夹。

avatar :用户头像文件夹

cache :缓存文件夹

data :数据文件夹(屏蔽蜘蛛)

emotion :表情文件夹

language :语言包文件夹(屏蔽蜘蛛)

logs :目志文件夹,里面文件是记录错误的(屏蔽蜘蛛)

plugin :插件文件夹

theme :主题文件夹

upload :附件文件夹(图片或其它类型文件)

zblog博客的robots.txt文件的写法

以下输入规则,仅供参考

User-agent: *
Disallow: /zb_system/
Disallow: search.php
Disallow: /zb_users/data/
Disallow: /zb_users/language/
Disallow: /zb_users/logs/
Sitemap:http://www.5gblog.com.cn/sitemap.xml

robots.txt安装与效验

robots.txt 文件应该放在网站根目录下,并且该文件是可以通过互联网进行访问的,否则是没有什么作用的。

安装方法

1、本地新建‘文本文档’并命名为 'robots.txt' 把上面的内容复制,保存即可

2、把 'robots.txt'文件上传到服务器的网站根目录即可

rotots.txt文件效验

可以通过百度搜索资源平台进行效验

TIM图片20200719102119.png



相关文章

PMBOK指南-PMP考试-PMP备考练习题-PMP模拟题006

1、通过把需要关注的各种事项进行合理排序,以便有效的收集关于潜在质量问题的有用数据,这是一个:A.核对单B.计数表C.统计抽样D.问卷调查1.参考答案:B 参见 PMBOK指南,第 302...

PMBOK指南-PMP考试-PMP备考练习题-PMP模拟题001

1.项目是:A. 一组持续的活动中执行的一个过程或系统B. 只要客户满意,必定会有收益的活动C. 为满足客户和市场需要,正在从事的工作D.为创造独特的产品、服务或成果而进行的临时性工作...........

PMBOK指南-PMP考试-PMP备考练习题-PMP模拟题009

PMBOK指南-PMP考试-PMP备考练习题-PMP模拟题009

1.An organization’s lessons learned database indicates that past major project issues have been qu...

PMBOK指南-PMP考试-PMP备考练习题-PMP模拟题005

1、对每个活动进行数据分析,以判断要比较其可能成本与预期效益,这是:A.质量成本B.成本效益分析C.访谈D.头脑风暴1.参考答案:B 参见 PMBOK指南,第 282 页,8.1.2.3 节...

PMBOK指南-PMP考试-PMP备考练习题-PMP模拟题002

1.以下都是关键相关方和项目经理在制定项目成功的测量标准时需要回答的问题,除了:A.对于这个项目来说,成功是什么样子的?B.如何评估项目成功?C.沟通的需求是什么?D.哪些因素可能影响项目成功?......

今天建设了自己博客独立站,采用了阿里云服务器和zblog模板

大家好,在这里记录一下自己的第一篇Zblog 日记,我今天建设了自己的独立博客站了。我准备在自己博客里记录我的一些工作、生活、曾经接触过的项目以及现在还在做的项目。同时,我也会把一下项目分享给能接触到...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。