1、網(wǎng)站想要取消限制搜索引擎抓取可以直接在網(wǎng)站后臺(tái)進(jìn)行設(shè)置，通過(guò)上傳robots文件或者在服務(wù)器上面利用網(wǎng)站安全狗軟件設(shè)置靜止抓取等方式。
2、方法：修改robots文件，取消該頁(yè)面的屏蔽，robots的標(biāo)準(zhǔn)寫(xiě)法百度百科里有詳細(xì)介紹：網(wǎng)頁(yè)鏈接 在百度站長(zhǎng)平臺(tái)（已更名為百度資源平臺(tái)）更新網(wǎng)站robots，過(guò)一段時(shí)間，您的這個(gè)網(wǎng)站就會(huì)被正常抓取收錄了。
3、首先在手機(jī)中打開(kāi)百度瀏覽器，點(diǎn)擊我的，然后在打開(kāi)的個(gè)人中心頁(yè)面里，點(diǎn)擊設(shè)置圖標(biāo)，接著在設(shè)置界面。點(diǎn)擊清除瀏覽數(shù)據(jù)，然后勾選Cookies和應(yīng)用打開(kāi)攔截記錄。最后選擇完成之后，點(diǎn)擊一鍵清理，這樣瀏覽器中就解除了禁止訪問(wèn)。
4、打開(kāi)手機(jī)自帶的瀏覽器，點(diǎn)擊下方的三點(diǎn)圖標(biāo)，點(diǎn)擊設(shè)置。點(diǎn)擊安全與隱私，將【安全瀏覽】右側(cè)的開(kāi)關(guān)關(guān)閉即可解除網(wǎng)站訪問(wèn)限制。網(wǎng)站就是一種人機(jī)溝通交流的工具。它由3大部分組成，即網(wǎng)站的三要素，域名、空間、源文件。
5、取消百度收錄。你的意思是不想被百度的網(wǎng)站收錄？機(jī)器人直接寫(xiě)，拒絕納入全站，就像淘寶一樣。把robots文件放在根目錄下，百度就不會(huì)收集和抓取網(wǎng)頁(yè)了。
6、方法二：首先提交進(jìn)行站停保護(hù)；然后去掉對(duì)網(wǎng)站不利的部分(包括刪除垃圾信息)，三天后提交給網(wǎng)站，等待網(wǎng)站正常抓取。一般一周就正常了。
方法：修改robots文件，取消該頁(yè)面的屏蔽，robots的標(biāo)準(zhǔn)寫(xiě)法百度百科里有詳細(xì)介紹：網(wǎng)頁(yè)鏈接 在百度站長(zhǎng)平臺(tái)（已更名為百度資源平臺(tái)）更新網(wǎng)站robots，過(guò)一段時(shí)間，您的這個(gè)網(wǎng)站就會(huì)被正常抓取收錄了。
出現(xiàn)這種問(wèn)題，只需要登錄服務(wù)器空間，一般用ftp就可以，然后打開(kāi)robots.txt文件，把里面的禁用刪掉就可以了。
用其他搜索引擎試試。這個(gè) robots.txt 東西是一種“協(xié)議”告訴搜索引擎，請(qǐng)不要搜索這個(gè)文件里所聲明的東西。這不是必須遵守的，但是一般正規(guī)服務(wù)商都會(huì)自動(dòng)遵守這個(gè)協(xié)議。
1、【處理方式】：修改Robots封禁為允許，然后到百度站長(zhǎng)后臺(tái)檢測(cè)并更新Robots。在百度站長(zhǎng)后臺(tái)抓取檢測(cè)，此時(shí)顯示抓取失敗，沒(méi)關(guān)系，多點(diǎn)擊抓取幾次，觸發(fā)蜘蛛抓取站點(diǎn)。在百度站長(zhǎng)后臺(tái)抓取頻次，申請(qǐng)抓取頻次上調(diào)。
2、網(wǎng)站想要取消限制搜索引擎抓取可以直接在網(wǎng)站后臺(tái)進(jìn)行設(shè)置，通過(guò)上傳robots文件或者在服務(wù)器上面利用網(wǎng)站安全狗軟件設(shè)置靜止抓取等方式。
3、方法：修改robots文件，取消該頁(yè)面的屏蔽，robots的標(biāo)準(zhǔn)寫(xiě)法百度百科里有詳細(xì)介紹：網(wǎng)頁(yè)鏈接 在百度站長(zhǎng)平臺(tái)（已更名為百度資源平臺(tái)）更新網(wǎng)站robots，過(guò)一段時(shí)間，您的這個(gè)網(wǎng)站就會(huì)被正常抓取收錄了。
4、解決方法：使用管理員賬戶登入FTP 進(jìn)入web根目錄下，將robots.txt文件中對(duì)應(yīng)代碼刪除即可。
5、用其他搜索引擎試試。這個(gè) robots.txt 東西是一種“協(xié)議”告訴搜索引擎，請(qǐng)不要搜索這個(gè)文件里所聲明的東西。這不是必須遵守的，但是一般正規(guī)服務(wù)商都會(huì)自動(dòng)遵守這個(gè)協(xié)議。
