文件夹名和频道网址名称不一致如何设置robots文件

seo宾

破烂茅屋 发表于 2013-5-10 16:26
User-agent: *
Disallow:/abc/
这种方式， se是根据url路径抓取网页，而不是你站点的物理路径。 ...

谢谢，您给的意见

seo宾

域名/abc/123.html
存放的文件夹是/def/
如何设置robots，禁止抓取/abc/的页面？？
User-agent: *
Disallow:/abc/  
Disallow:/def/
如果这样设置，这种方法正确吗？
如果这样设置
User-agent: *
Disallow:/abc/

或
User-agent: *
Disallow:/def/
搜索引擎是否还会抓取“/abc/”的页面？

破烂茅屋

User-agent: *
Disallow:/abc/
这种方式， se是根据url路径抓取网页，而不是你站点的物理路径。