[杂学]关于 robots.txt 的介绍、作用和写法(日期:20190612)

对于建站的各位站长来说,少不了要和搜索引擎打交道,像是常见的 SEO,搜索引擎权重,死链排查和修复之类的,肯定都或多或少的听过一点。不过我这次想说的 robots.txt,平常我们接触到的应该不多,有些刚接触建站的站长可能都没听过,然而它又是我们与搜索引擎打交道必须要了解的一项,因此这次还是写一篇文…