2015-01-14 分類(lèi): 網(wǎng)站建設(shè)
很多seo新手不僅不知道怎么利用robots,甚至不明白robots文件到底是為何物,但是這里需要指出的是,很多網(wǎng)站就是沒(méi)有設(shè)置好這個(gè)文件導(dǎo)致了排名不理想,因此這個(gè)文件對(duì)網(wǎng)站優(yōu)化是非常重要的,萬(wàn)萬(wàn)不容馬虎,當(dāng)然了很多人卻不明白這其中的道理。下面創(chuàng)新互聯(lián)就來(lái)和大家說(shuō)說(shuō)robots文件對(duì)seo優(yōu)化的重要性。
一、robots文件是用來(lái)干什么的?
其實(shí)這個(gè)文件是一種協(xié)議,所有的搜索引擎蜘蛛進(jìn)入網(wǎng)站的時(shí)候第一個(gè)訪問(wèn)的就是這個(gè)文件,具體的作用就是用來(lái)我們站長(zhǎng)自由設(shè)置哪些文件可以抓取,哪些不能抓取。
二、robots文件設(shè)置的格式:
User-agent: 定義搜索引擎的類(lèi)型;
Crawl-delay: 定義抓取延遲
Disallow:定義禁止搜索引擎收錄的地址
Allow: 定義允許搜索引擎收錄的地址
三、為什么說(shuō)robots文件對(duì)SEO非常重要?
1.搜索引擎喜歡原創(chuàng)內(nèi)容,這是眾所周知的事情,而這一方面并不是單單是指網(wǎng)站文章的原創(chuàng)度,另一方面網(wǎng)站模板的原創(chuàng)度也是非常重要的評(píng)分點(diǎn),所以如果自己網(wǎng)站的模板不是原創(chuàng),最好要屏蔽css目錄和模板目錄。
2.網(wǎng)站優(yōu)化切忌的就是重復(fù)或者相似的頁(yè)面,而搜索引擎瀏覽一個(gè)網(wǎng)站不是像人那樣的,靠的還是蜘蛛的抓取。但是不少人沒(méi)有重視的是,現(xiàn)在的主流網(wǎng)站程序都很容易自動(dòng)產(chǎn)生一些沒(méi)用的頁(yè)面,比如緩存頁(yè)面,搜索頁(yè)面,feed頁(yè)面等等,這些頁(yè)面內(nèi)容往往和主體內(nèi)容相重復(fù),而且沒(méi)有什么用,如果不小心被蜘蛛抓到,那么對(duì)網(wǎng)站排名會(huì)有非常嚴(yán)重的負(fù)面影響,很多網(wǎng)站之所以沒(méi)有排名,就是因?yàn)樗阉饕姘l(fā)現(xiàn)了網(wǎng)站存在大量的重復(fù)或者相似的頁(yè)面。
3.可以大大的增強(qiáng)蜘蛛網(wǎng)站的爬取效率,與網(wǎng)站的內(nèi)鏈有異曲同工之用,幫助搜索引擎理解哪些才是網(wǎng)站最重要的內(nèi)容,不再浪費(fèi)到其它的那些無(wú)用的頁(yè)面上。
4.利用robots文件可以用來(lái)屏蔽一些沒(méi)有用的頁(yè)面,比如隱私頁(yè)面,后臺(tái)登陸頁(yè)面,圖片目錄等內(nèi)容,或者屏蔽其他的一些網(wǎng)站關(guān)鍵詞無(wú)關(guān)的頁(yè)面。
總之,robots文件是網(wǎng)站非常重要的一個(gè)優(yōu)化部分,這個(gè)方面往往制約著網(wǎng)站的成敗,這當(dāng)然是網(wǎng)站優(yōu)化非常細(xì)節(jié)的一個(gè)方面,不過(guò)往往細(xì)節(jié)決定成敗,很多人卻沒(méi)有意識(shí)到這一點(diǎn),希望通過(guò)上述的介紹,大家都會(huì)明白這方面的重要性。
網(wǎng)站欄目:robots文件對(duì)SEO優(yōu)化的重要性
文章來(lái)源:http://m.newbst.com/news26/21376.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供面包屑導(dǎo)航、網(wǎng)站建設(shè)、云服務(wù)器、App設(shè)計(jì)、Google、營(yíng)銷(xiāo)型網(wǎng)站建設(shè)
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶(hù)投稿、用戶(hù)轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容