PHP
是世界上最好的语言

网站建设

WordPress博客站,robots.txt详解-PHPBeta

WordPress博客站,robots.txt详解

星痕阅读(294)评论(0)赞(0)

一、使用robots协议必要细致的几点地方: 1、指令区分大小写,忽略未知指令。 2、每一行代表一个指令,空白和隔行会被忽略。 3、“#”号后的字符参数会被忽略。 4、有自力User-agent的规则,会排除在通配“*”User agent...