網(wǎng)站建好后想被百度、谷歌搜到，得先讓搜索引擎的 “蜘蛛” 爬取到內(nèi)容。但很多網(wǎng)站明明內(nèi)容不錯(cuò)，蜘蛛?yún)s不愿意來，或者說是找不到路，其實(shí)是被這幾個(gè)因素?fù)踝×耍旅婢蛶Т蠹乙黄饋砹私庖幌隆?/p>

　　1、網(wǎng)站加載太慢，蜘蛛等不及就走了。

　　蜘蛛在爬取信息的時(shí)候，通常是沒有耐心等的，要是網(wǎng)站打開要3秒以上，那蜘蛛加載卡半天，可能會(huì)直接放棄爬取這頁內(nèi)容，所以大家要想讓蜘蛛愿意等，就得精簡(jiǎn)代碼，壓縮圖片，以保證網(wǎng)站打開速度更快。

　　2、網(wǎng)站結(jié)構(gòu)像迷宮，蜘蛛找不到路。

　　蜘蛛爬取靠“鏈接導(dǎo)航”，要是網(wǎng)站導(dǎo)航混亂，比如沒明確的“首頁→分類→內(nèi)容頁”層級(jí)、又或者是沒加 “面包屑導(dǎo)航”（像“首頁→手機(jī)→蘋果機(jī)型” 這樣的路徑提示），更糟糕的是有“死鏈接”（點(diǎn)進(jìn)去顯示 “404 頁面不存在”），這些情況，都會(huì)導(dǎo)致蜘蛛爬不到內(nèi)容，所以大家在建網(wǎng)站的時(shí)候要記得把導(dǎo)航做清晰，并定期檢查并刪掉死鏈接，給蜘蛛留條“順暢的路”。

　　3、內(nèi)容沒“營(yíng)養(yǎng)”，蜘蛛不愿帶。

　　蜘蛛爬取是為了抓取有價(jià)值的內(nèi)容，要是網(wǎng)站內(nèi)容全是大段的圖片/視頻（沒配文字說明，蜘蛛看不懂）、或直接抄其他網(wǎng)站的內(nèi)容，沒啥價(jià)值的話，蜘蛛根本就不想抓取，因?yàn)檫@樣的內(nèi)容給不了搜索引擎用戶幫助。所以要讓蜘蛛愿意爬，內(nèi)容要得原創(chuàng)、有干貨、有價(jià)值才行。

　　4、亂設(shè)“禁止入內(nèi)”，把蜘蛛擋在門外。

　　網(wǎng)站根目錄有個(gè)“robots 協(xié)議”，相當(dāng)于門口貼的“訪客須知”，要是誤設(shè)置成“禁止所有蜘蛛爬取”，比如新手不懂，隨便復(fù)制別人的 robots 代碼，蜘蛛看到直接轉(zhuǎn)身走。建網(wǎng)站后一定要檢查 robots 協(xié)議，只禁止爬取沒用的頁面，核心內(nèi)容頁（首頁、產(chǎn)品頁）要允許蜘蛛進(jìn)入。

　　5、移動(dòng)端沒法看，蜘蛛“另眼相看”。

　　現(xiàn)在搜索引擎先爬取移動(dòng)端內(nèi)容，要是網(wǎng)站只做了電腦端，手機(jī)打開后文字小到看不清、按鈕擠在一起（沒做響應(yīng)式適配）。比如用戶用手機(jī)看你的博客，文章段落全堆在一起，沒換行沒分段，蜘蛛爬取時(shí)也會(huì)覺得“體驗(yàn)差”，爬取優(yōu)先級(jí)會(huì)降低。在建網(wǎng)站的時(shí)候也一定要做移動(dòng)端適配，才能保證手機(jī)端能正常瀏覽。

　　其實(shí)影響蜘蛛爬取的核心，就是 “讓蜘蛛好爬、好懂、有收獲”，大家可以多看看以上幾點(diǎn)，來幫助網(wǎng)站吸引蜘蛛頻繁 “上門” 爬取，從而進(jìn)一步讓更多用戶找到你。