robots.txt

• seo基础

  什么是robots协议？robots协议怎么写？

  一、什么是robots协议？ robots.txt（robots协议）是一个纯文本文件，也是网站的声明文件，当搜索引擎蜘蛛来爬取网站的时候，首先问访问这个robots.txt文件，…

  大BOSS

  2019年2月14日

  20301