2014-09-08 分類: 網站建設
我們在優化網站時,有很多設置是不利于蜘蛛抓取的,具體有哪些呢?下面小編為大家總結的一些設置方法,僅供參考:
登錄設置
有些網站會設置注冊賬號的服務,登錄之后才能看到網站的內容,這種設置對于蜘蛛來說不友好,蜘蛛它也不會注冊登錄,自然就抓取不到了。
動態URL
所謂動態URL就是在鏈接中“?”同時以aspx、asp、jsp、perl、php、cgi為后綴的url,便是動態URL,動態URL的變動性較大,不如靜態URL穩定,搜索引擎一般對動態URL不夠信任,從而使很多動態URL的網頁不能被收錄。
使用Cookies
Cookies的作用是識別用戶的身份,Cookies如果未開啟,則無法進行訪問,這樣會導致蜘蛛無法訪問,從而影響抓取。
網站跳轉
有些網站打開之后就會自動跳轉到其他的頁面,跳轉會增加網站加載的時間,不推薦大家這樣做,只做301跳轉就可以了,301跳轉可以進行權重的集中,其他類型的調整不建議做。
Flash文件
有些網站設計一些Flash文件,為瀏覽用戶帶來很好的視覺效果,但可惜搜索引擎看不到,無法讀取任何內容所以為了能體現網站優化的最好效果,不提倡這種Flash做首頁圖片。
以上幾方面的設置,都可能直接或者間接性的影響蜘蛛爬行速度和抓取量,所以是需要各位站長們注意的,內容僅供參考,如需補充請在線留言。
本文題目:網站哪些設置會影響蜘蛛抓取?
網頁鏈接:http://m.newbst.com/news/29358.html
成都網站建設公司_創新互聯,為您提供定制開發、云服務器、軟件開發、靜態網站、外貿建站、虛擬主機
聲明:本網站發布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創新互聯
猜你還喜歡下面的內容