帮我看看这段robots.txt是什么意思?User-agent: *Disallow: /Allow: /index.aspAllow: /infoshow.aspAllow: /kucun_show.aspAllow: /aboutshow.asp帮我看看这段网页代码什么意思,谢谢

来源:学生作业帮助网 编辑:作业帮 时间:2024/05/10 18:03:01

帮我看看这段robots.txt是什么意思?User-agent: *Disallow: /Allow: /index.aspAllow: /infoshow.aspAllow: /kucun_show.aspAllow: /aboutshow.asp帮我看看这段网页代码什么意思,谢谢
帮我看看这段robots.txt是什么意思?
User-agent: *
Disallow: /
Allow: /index.asp
Allow: /infoshow.asp
Allow: /kucun_show.asp
Allow: /aboutshow.asp
帮我看看这段网页代码什么意思,谢谢

帮我看看这段robots.txt是什么意思?User-agent: *Disallow: /Allow: /index.aspAllow: /infoshow.aspAllow: /kucun_show.aspAllow: /aboutshow.asp帮我看看这段网页代码什么意思,谢谢
只让搜索引擎抓取根目录下的index.asp infoshow.asp kucun_show.asp aboutshow.asp.其它都不允许抓取