1、大數(shù)據(jù)存儲(chǔ)問題：爬蟲抓取的數(shù)據(jù)在經(jīng)過預(yù)處理后數(shù)據(jù)量依然相當(dāng)龐大，這給大數(shù)據(jù)存儲(chǔ)技術(shù)帶來相當(dāng)大的挑戰(zhàn)。
2、搜索引擎面臨的挑戰(zhàn)主要有：單獨(dú)純粹的搜索引擎需要改進(jìn)，文字關(guān)鍵詞搜索已經(jīng)滿足不了人們的需求，尤其是在移動(dòng)互聯(lián)網(wǎng)時(shí)代，pc端互聯(lián)網(wǎng)與移動(dòng)互聯(lián)網(wǎng)相互存在，而且移動(dòng)互聯(lián)網(wǎng)總歸是會(huì)成為主流的。
3、提高網(wǎng)絡(luò)信息檢索技術(shù)水平并實(shí)現(xiàn)智能檢索，智能化是網(wǎng)絡(luò)信息檢索未來主要的發(fā)展方向。
4、看不懂搜素引擎了。每個(gè)搜索都有自己的一定規(guī)則，各不相同，是否能做到面面俱到呢？特別是百度的變化，有時(shí)候真的很詭異，做百度受打擊一定要扛得住，當(dāng)你做久了就知道，百度不打擊你那就不是百度了。
5、概括起來主要表現(xiàn)在三個(gè)方面： 其一是資訊丟失。
1、一般情況下，對于具體的某個(gè)關(guān)鍵詞，其搜索結(jié)果不會(huì)突然發(fā)生巨大的變動(dòng)。我們很少看到某關(guān)鍵詞的搜索結(jié)果前10位突然都換成其他的了，除非搜索引擎進(jìn)行算法修改。
2、對于企業(yè)網(wǎng)站，外部鏈接是將別人的企業(yè)網(wǎng)站加入到自己的超鏈接中。外部鏈接是搜索引擎優(yōu)化的重要組成部分，外部鏈接的質(zhì)量會(huì)對各大搜索引擎中主頁的權(quán)重造成非常大的影響。
3、第三，抓取診斷的應(yīng)用。作為網(wǎng)站的SEOer我們經(jīng)常會(huì)為網(wǎng)站更新內(nèi)容不被收錄而苦惱，而百度站長工具中的抓取診斷就可以為我們解決這個(gè)網(wǎng)站。當(dāng)我們對網(wǎng)站進(jìn)行日常更新后可以使用 這個(gè)工具，只要注冊、驗(yàn)證就可以，使用很簡單。
搜索引擎抓取失敗的原因有很多，最主要的原因就是網(wǎng)站的穩(wěn)定性，所以網(wǎng)站需要在任何時(shí)間和地點(diǎn)都要保證網(wǎng)站的穩(wěn)定性。
搜索引擎自身的原因 搜索引擎的算法時(shí)常都會(huì)有細(xì)微的改變，這樣或多或少的會(huì)影響到網(wǎng)站排名，這種情況有的時(shí)候過幾天就恢復(fù)了，有時(shí)一直不會(huì)恢復(fù)。
網(wǎng)站結(jié)構(gòu)是否合理 通常情況下來說，網(wǎng)站布局也是網(wǎng)站優(yōu)化工作的一部分，但是網(wǎng)站的整體布局是否合理，也能夠?qū)W(wǎng)站的收錄起到關(guān)鍵性的作用。
網(wǎng)站速度的影響 機(jī)房問題、dns問題、cdn加速問題、服務(wù)器帶寬、服務(wù)器硬件、操作系統(tǒng)、服務(wù)器軟件以及服務(wù)器所安裝的程序，這些都有可能影響我們網(wǎng)站的打開的速度。
頻繁修改網(wǎng)站標(biāo)題。新網(wǎng)站切勿頻繁修改網(wǎng)站標(biāo)題描述，如果要修改等網(wǎng)站收錄3個(gè)月以上再修改。虛擬主機(jī)空間不穩(wěn)定。建議更換主機(jī)。網(wǎng)站內(nèi)鏈結(jié)構(gòu)不友好，如首頁大flash動(dòng)畫，大幅圖片不利于蜘蛛爬行。
沙盒 沙盒現(xiàn)象是所有seo現(xiàn)象中最常見的一個(gè)現(xiàn)象，主要是針對一些新網(wǎng)站而言的。搜索引擎會(huì)對新網(wǎng)站進(jìn)行一段時(shí)間的考核，在這個(gè)考核的時(shí)間段中不會(huì)放出網(wǎng)站的收錄、排名等主要的信息。
因?yàn)槔嫌蛎幸欢ǖ男庞枚?，但是老域名歷史要是有不良記錄就會(huì)影響收錄。
規(guī)則一：不要作弊 忽略任何關(guān)于欺騙搜索引擎的建議，并且專注于制作優(yōu)秀的網(wǎng)站，你的網(wǎng)站將會(huì)在搜索中顯示出良好的表現(xiàn)。規(guī)則二：堅(jiān)持你的關(guān)鍵詞 挑選一些描述你的網(wǎng)站的關(guān)鍵詞或長尾關(guān)鍵詞。
第一，得分規(guī)則，是根據(jù)網(wǎng)站的總體信譽(yù)度，比如原創(chuàng)度、網(wǎng)站的停留時(shí)間、網(wǎng)站的跳出率、打開速度、圖片的處理、代碼的優(yōu)化等綜合判斷，稱為得分規(guī)則。
對于關(guān)鍵詞，需要進(jìn)行關(guān)鍵詞研究，了解用戶的搜索意圖和需求，并在網(wǎng)站中合理地使用關(guān)鍵詞，例如在標(biāo)題、描述、正文等位置，但不要過度堆砌關(guān)鍵詞，以免被搜索引擎認(rèn)為是作弊行為。
遵循搜索引擎規(guī)則：搜索引擎有一定的算法規(guī)則，網(wǎng)站需要遵循搜索引擎的優(yōu)化規(guī)范，避免使用不當(dāng)手法（如黑帽SEO），以免被搜索引擎降權(quán)或懲罰。
搜索引擎搜索規(guī)則：網(wǎng)站不能在網(wǎng)上復(fù)制別的網(wǎng)站的內(nèi)容。必須要符合用戶的搜索體驗(yàn)和習(xí)慣。網(wǎng)站需要有符合您網(wǎng)站性質(zhì)的備案信息。網(wǎng)站只能傳播正能量，不能傳播違背法律的內(nèi)容。
META標(biāo)簽規(guī)則有2個(gè)META標(biāo)簽對SEO有實(shí)際作用，即description和keywords。兩者皆為SE可容忍的隱藏關(guān)鍵字集，雖然各大SE一再更改算法，但這2個(gè)META標(biāo)簽仍對搜索結(jié)果有影響。
