石家莊網(wǎng)站建設(shè)方案報(bào)價(jià)

網(wǎng)站為什么在百度搜索中沒(méi)有收錄?如何解封百度蜘蛛?

來(lái)源:bestvalueblinds.com 時(shí)間:2023-02-28 11:27:33 瀏覽:1304次

  為什么網(wǎng)站或智能小程序資源的內(nèi)容非常優(yōu)質(zhì),但是沒(méi)有查詢(xún)到百度蜘蛛抓取記錄,或在百度搜索中沒(méi)有得到收錄和展現(xiàn)?
 
其原因就是,有些網(wǎng)站或智能小程序存在封禁百度蜘蛛的情況,導(dǎo)致百度蜘蛛無(wú)法正常抓取,所以無(wú)法在百度搜索中正常收錄和展現(xiàn),或在搜索結(jié)果中的摘要展現(xiàn)為“存在robots封禁”字樣。
 
常見(jiàn)的封禁行為主要有三種:robots封禁、封禁百度UA、封禁百度IP。
 
如何驗(yàn)證網(wǎng)站和智能小程序是否存在封禁百度蜘蛛的情況?
 
1、首先, 查看robots.txt文件,是否存在封禁記錄。
 
一般robots.txt文件放置在網(wǎng)站根目錄下。
 
【建議方案】解除robots封禁:robots封禁情況,請(qǐng)檢查robots.txt文件,及時(shí)修改。
 
robots文件說(shuō)明:https://ziyuan.baidu.com/college/articleinfo?id=1516
 
2、robots文件無(wú)異常,進(jìn)一步排查是否存在封禁百度UA情況;
 
方案一:執(zhí)行 curl --head --user-agent 'Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)' --request GET 'xxxxxxx'
 
注:正常返回碼是200,其他情況為異常。
 
xxxxxxx為網(wǎng)站域名,如:http://wangzhan.net.cn 
 
正確識(shí)別和獲取百度蜘蛛,https://ziyuan.baidu.com/college/articleinfo?id=2855
 
方案二:變更瀏覽器UA驗(yàn)證;
 
【建議方案】解除百度UA封禁:查看網(wǎng)站反爬蟲(chóng)策略,進(jìn)行策略調(diào)整?;蜥槍?duì)百度UA添加策略白名單。
 
3、以上驗(yàn)證均無(wú)異常,最后進(jìn)一步排查是否存在IP級(jí)別的封禁;
 
常見(jiàn)的IP封禁,源自網(wǎng)站的防火墻系統(tǒng)配置,需要查看防火墻配置系統(tǒng)后臺(tái),檢查是否存在百度蜘蛛的IP級(jí)別封禁措施。
 
【建議方案】解除百度IP封禁:查看網(wǎng)站反爬蟲(chóng)策略,進(jìn)行策略調(diào)整。

上一篇:網(wǎng)站優(yōu)化與搜索引擎的關(guān)系

下一篇:企業(yè)如何應(yīng)對(duì)SEO網(wǎng)絡(luò)營(yíng)銷(xiāo)推廣9大誤區(qū)

返回列表

網(wǎng)站建設(shè)知識(shí)

石家莊網(wǎng)站建設(shè) 石家莊網(wǎng)站優(yōu)化 石家莊網(wǎng)站建設(shè)報(bào)價(jià) 石家莊網(wǎng)站推廣
石家莊網(wǎng)站建設(shè)方案 石家莊網(wǎng)站建設(shè)推廣 石家莊網(wǎng)站制作維護(hù)

更多 +聯(lián)系我們

24小時(shí)服務(wù)熱線(xiàn):400-1180-360

業(yè)務(wù) QQ:  444961110電話(huà): 0311-80740308

渠道合作:  444961110@qq.com

更多 +關(guān)于我們

河北供求互聯(lián)信息技術(shù)有限公司(河北供求網(wǎng))誕生于2003年4月,是康靈集團(tuán)旗下子公司,也是河北省首批從事網(wǎng)站建設(shè)、電子商務(wù)開(kāi)發(fā),并獲得國(guó)家工業(yè)和信息化部資質(zhì)認(rèn)證的企業(yè)。公司自成立以來(lái),以傳播互聯(lián)網(wǎng)文化為已任, 以高科技為起點(diǎn),以網(wǎng)絡(luò)營(yíng)銷(xiāo)研究與應(yīng)用為核心,致力于為各企事業(yè)單位提供網(wǎng)絡(luò)域名注冊(cè)、虛擬主機(jī)租用、網(wǎng)站制作與維護(hù)、網(wǎng)站推廣和宣傳、網(wǎng)站改版與翻譯、移動(dòng)互聯(lián)網(wǎng)營(yíng)銷(xiāo)平臺(tái)開(kāi)發(fā)與運(yùn)營(yíng)、企業(yè)郵局、網(wǎng)絡(luò)支付、系統(tǒng)集成、軟件開(kāi)發(fā)、電子商務(wù)解決方案等優(yōu)質(zhì)的信息技術(shù)服務(wù),與中國(guó)科學(xué)院計(jì)算機(jī)網(wǎng)絡(luò)信息中心、騰訊、百度、阿里巴巴、搜狗、360、電信、聯(lián)通、中國(guó)數(shù)據(jù)、萬(wàn)網(wǎng)、中資源、陽(yáng)光互聯(lián)、點(diǎn)點(diǎn)客、北龍中網(wǎng)、電信通等達(dá)成戰(zhàn)略合作伙伴關(guān)系。

版權(quán)所有 ? 河北供求互聯(lián)信息技術(shù)有限公司-優(yōu)秀的石家莊網(wǎng)站建設(shè)公司,為您提供石家莊網(wǎng)站建設(shè)、網(wǎng)站推廣等優(yōu)質(zhì)服務(wù).   
服務(wù)熱線(xiàn):400-1180-360 增值電信業(yè)務(wù)經(jīng)營(yíng)許可證:冀B2-20105159 冀ICP備09010972號(hào)

在線(xiàn)留言
免費(fèi)試用
掃一掃

掃一掃
贈(zèng)送神秘大禮

全國(guó)免費(fèi)服務(wù)熱線(xiàn)
400-1180-360

返回頂部