當(dāng)前位置：首頁(yè)
> 禁止所有搜索引擎抓取的代碼
禁止所有搜索引擎抓取的代碼(禁止所有搜索引擎抓取的代碼怎么寫)
同時(shí)還會(huì)創(chuàng)建網(wǎng)站的robotsTXT文件，將以下代碼寫入該文件1 Useragent *2 Disallow 這個(gè)代碼的作用是阻止網(wǎng)絡(luò)爬蟲(chóng)對(duì)你的網(wǎng)頁(yè)進(jìn)行索引但是還取決于搜索引擎是否接受這個(gè)指令所以，雖然大多數(shù)搜索引擎會(huì)尊重這個(gè)請(qǐng)求。 1通過(guò) robotstxt 文件屏蔽 可以說(shuō) robotstxt...