對于新手來(lái)說(shuō)，自己設置的robots.txt有沒(méi)有錯誤，自己并不知道。又沒(méi)有高手指點(diǎn)。
小編教你一下，有個(gè)工具可以監測robots.txt文件是否設置成功，有沒(méi)有錯誤。
https://ziyuan.baidu.com/打開(kāi)百度站長(cháng)工具，可以使用robots工具監測。