如何使用標簽阻止網(wǎng)頁被收錄?
我們可以使用<META>標簽攔截或刪除網(wǎng)頁:在網(wǎng)頁的 <HEAD> 部分添加適當?shù)?<META> 標簽。
(1)攔截所有搜索引擎把網(wǎng)頁收錄:
<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">
(2)如果您希望只是攔截百度蜘蛛爬取網(wǎng)頁,而允許其他搜索引擎收錄:
<META NAME="baiduspider" CONTENT="NOINDEX, NOFOLLOW">
(3)如果允許搜索引擎收錄你的網(wǎng)頁,但禁止其追蹤外部鏈接(如:zh.wikipedia.org 為了防止鏈接泛濫采用了此例):
<META NAME="ROBOTS" CONTENT="NOFOLLOW">
(4)如果允許搜索引擎收錄你的網(wǎng)頁,但禁止其收錄網(wǎng)頁上的圖片:
<META NAME="ROBOTS" CONTENT="NOIMAGEINDEX">
備注:哪一個網(wǎng)頁需要攔截或刪除,則在那個網(wǎng)頁添加<META> 標簽,其他頁面不會受影響。<META> 標簽針對的是具體的某個網(wǎng)頁,而不是整個網(wǎng)站。
相關(guān)資料供您參考:robots.txt