提高網站收錄:分析搜索引擎的抓取日志
2012/3/21 10:59:18

1、分析搜索引擎的抓取日志
當我們的網頁被收錄之前,首先是需要搜索引擎來爬行、抓取的,當搜索引擎抓取到你的頁面后,而且它覺得你的文章質量符合它的收錄標準的時候,它就會把你的網頁收錄進它的索引庫、然后經過處理給予你的網頁相應的 關鍵詞 的排名,而分析日志,可以清楚的知道我們哪些頁面被抓取了,哪些頁面沒有被抓取,網站的每個目錄的抓取情況,這樣我們可以采取相應的措施來促進搜索引擎的收錄。
2、在首頁多展示未被抓取的網頁的URL
在上一步驟,我們已經把未抓取的URL列表提取出來了,然后我們可以把這些URL在首頁展示,以增加被搜索引擎抓取的機會,許多網站至所以在首頁有最新文章版塊、隨機展示版塊,其實也大都是為了增加被搜索引擎抓取的機會從而增加網站頁面的收錄,首頁的權重是一個網站中最高的URL頁面,往往也是蜘蛛最活躍的頁面,所以在首頁展示往往可以增加收錄。
3、利用robots.txt文件以及nofollow、noindex標簽協助搜索引擎收錄
讀過搜索引擎原理書的人都知道,對于搜索引擎來說,它的資源是有限的,每天搜索引擎只能抓取 互聯網 中網頁的一部分,而在這抓取的網頁中,收錄也只是一部分,所以搜索引擎的資源很稀缺,在這種情況下,我們要把我們最重要頁面的URL給盡量的展示給搜索引擎,而對于一些沒有收錄價值的頁面,可以阻止其收錄、或者阻止其跟蹤,在這里robots文件與nofollow就派上用場了,例如一些沒有收錄意義的聯系我們、企業招聘、登錄、注冊等這些鏈接,我們可以直接用nofollow阻止搜索引擎去跟蹤,對于一些目錄例如網站的模板目錄、網站中一些動態URL,我們可以使用robots直接阻止搜索引擎收錄,而且我們還可以把noindex屬性加到頁面的head部分阻止搜索引擎收錄,當我們把這些所謂的無意義頁頁都阻止抓取以后,搜索蜘蛛就會在我們網站抓取更多有意義的頁面,從而增加我們的有效收錄。
4、多發一些網站列表頁URL的外鏈
在SOSO的官方SEO指南中,曾經提到過這一點,也就是說我們可以專注于我們的列表頁,可以給一些列表頁多發一些外鏈,因為列表頁里邊的有效URL比較多,當搜索引擎蜘蛛抓取到列表頁后,就會抓取列表頁中的產品URL,從而增加我們的收錄。
5、靈活調整搜索引擎的抓取頻率
在谷歌網站管理員工具中,其中有一項就是我們可以根據自己網站的情況,調整搜索引擎的抓取頻率,在默認的情況下,谷歌是按照你的網站的 服務器 承認情況,來調整它的抓取頻率的,它的原則就是在你服務器能夠承受的情況下、盡可能多的去抓取。因此,如果我們想提高它的抓取頻率,我們可以在這谷歌網站管理同工具里邊進行調整,當然這個只能是針對谷歌的。

返回列表
返回首頁 主站蜘蛛池模板: 亚洲乱码卡一卡二卡三| 四虎影视永久在线观看| 99精品视频在线观看免费| 无人视频在线观看免费播放影院 | 成年人免费小视频| 久久精品人人爽人人爽| 欧美性xxxxx极品老少| 亚洲色成人www永久网站| 精品欧美同性videosbest| 无码人妻久久一区二区三区不卡| 亚洲人免费视频| 欧美视频在线播放bbxxx| 免费成人福利视频| 美女被艹免费视频| 国产人妖cd网站| 国产高清国内精品福利| 国产精品亚洲色婷婷99久久精品| aaa毛片免费观看| 小莹与翁回乡下欢爱姿势| 丰满白嫩大屁股ass| 日韩爱爱小视频| 亚洲s色大片在线观看| 欧美成人观看视频在线| 亚洲色中文字幕在线播放| 精品乱子伦一区二区三区| 噜噜噜在线观看播放视频| 被民工蹂躏的雯雅婷| 国产成人久久精品一区二区三区 | 日韩专区第一页| 亚洲AV无码久久| 精品国产福利第一区二区三区| 国产精品久久国产精品99盘| 97久久综合精品久久久综合| 天天摸天天舔天天操| 一区二区三区在线观看免费| 成人欧美日韩一区二区三区| 久久se精品一区精品二区| 日本年轻的妈妈| 亚洲成年人影院| 美国十次啦大导航| 国产久视频观看|