热门搜索
还没有账号？ 去注册 >
robots.txt文件应该放在网站根目录下，用好robots是很容易为你网站提权的。主要作用是让搜索引擎抓取什么，不让搜索引擎抓取什么。 一、robots.txt 的写法： User-agent: *意思是允许所有搜索引擎收录，星号代表所有。Disallow:/意思是禁止搜索引擎...
2021-04-20
25
seo基础robots写法及robots高级玩法 什么是robots? robots.txt是搜索引擎中访问网站的时候要查看的第一个文件。当搜索来爬行网站时候，会先看网站里有没有robots这个文件，如果有这个文件，会按照robots文件给的爬行规则进行网站的爬取。 为什么要...
2021-03-19
34
邮箱