求助网站robots..txt的写法
我的网站跟目录下文件夹article内有很多文件,我只不想让搜索引擎收录里面的a.asp和b.asp这两个文件,而不要影响文件夹内其它文件的收录,这在robots应该怎么写?
[解决办法]
User-agent: *
Disallow: /article/a.asp
Disallow: /article/b.asp