當前位置:廈門SEO > 網站優化 > 正文

青島seo培訓:robots與robots meta標簽的應用

龍騰SEO 2019-04-11 577 0

robots文件是搜索引擎蜘蛛來到網站后訪問的第一個文件,我們在編寫時有很多需要注意的地方,如果不注意語法的正確使用,有些語句可能發揮不了應有的作用,會影響搜索引擎對網站的訪問,今天青島seo培訓分享下robots與robots meta標簽的應用。

robots

robots文件可以指定sitemap的位置,寫法是 sitemap:域名/sitemap.xml,這樣就告訴搜索引擎蜘蛛這個地址是網站地圖,如果我們有一些隱私文件要屏蔽搜索引擎蜘蛛不讓其抓取時,可以在robots中設置屏蔽蜘蛛抓取這些隱私文件,相反網站中沒有要屏蔽的內容時,可以不添加robots文件。

如果有個頁面不想讓搜索引擎收錄但卻已經收錄了,我們可以通過robots meta標簽來解決。robots.txt文件主要是限制整個站點或者目錄的蜘蛛訪問,而 robots meta標簽則主要是針對某個具體的頁面,此標簽放在頁面中,專門用來告訴搜索引擎蜘蛛如何抓取該頁的內容。

robots meta標簽的基本寫法是:<meta name="robots" conten="index,follow">,可以說是SEO基礎知識,以下是幾項需要特別注意的地方:

1、在 robots meta標簽中,name="robots"表示所有的搜索引擎,也可以針對某個具體的搜索引擎,如針對百度可以寫為 name="Baiduspider"。
2、content部分有4個指令選項,以英文逗號“,”隔開,分別是:index、follow、noindex、nofollow

index 指令告訴搜索引擎蜘蛛可以抓取該頁面。
noindex 指令與index指令相反,表示搜索引擎蜘蛛不可以抓取該頁面。
follow 指令表示搜索引擎蜘蛛可以爬行該頁面上的鏈接。
notollow 指令與 follow指令相反,表示搜索引擎蜘蛛不可以爬行該頁面上的鏈接。

綜上所述,robots meta標簽有以下4種組合:
<meta name="robots" content="index,follow">
<meta name="robots" content="noindex,follow">
<meta name="robots" content="index,nofollow">
<meta name="robots" content="noindex,nofollow">

當robots meta標簽的content值為"index,follow"時,表示這個頁面可以被抓取,此頁面上的鏈接也可以被繼續爬行,robots meta標簽可以簡寫成< meta name="robots" content="all">。

當robots meta標簽的content值為"noindex,nofollow"時,表示這個頁面不可以被抓取,此頁面上的鏈接也不可以被繼續爬行,robots meta標簽可以簡寫成<meta name="robots" content="none">。

今天青島seo培訓講的是一些標簽用法,robots meta標簽的是限制某個具體頁面的蜘蛛訪問情況,因此當發現網站中某個頁面需要屏蔽蜘蛛抓取時,可以在該頁面的源代碼的<head>和</head>之間添加robots meta標簽。

轉載請注明來自龍騰SEO,本文標題:青島seo培訓:robots與robots meta標簽的應用
本文地址:http://www.mbkvmf.live/content/217.html

標簽:

本文暫時沒有評論,來添加一個吧(●'?'●)

歡迎 發表評論:

關于我

歡迎加我的微信號交流

文章代更新
熱門文章
隨機tag
百度蜘蛛反向鏈接百度惡意點擊百度競價推廣微博營銷新聞營銷品牌知名度百度快照博客優化301重定向FastCGI外部鏈接網站排名mysql命令加固服務器用戶體驗偽原創寫法外鏈建設網站權重網站診斷新媒體營銷活動專題頁百度負面域名歷史
青海快3开奖今天