对于新手来说，自己设置的robots.txt有没有错误，自己并不知道。又没有高手指点。
小编教你一下，有个工具可以监测robots.txt文件是否设置成功，有没有错误。
https://ziyuan.baidu.com/打开百度站长工具，可以使用robots工具监测。