當(dāng)前位置:首頁 >  站長 >  網(wǎng)站運(yùn)營 >  正文

百度抓取js么 百度蜘蛛識別js么 js需要屏蔽抓取么

 2020-11-11 15:45  來源: 代代SEO博客   我來投稿 撤稿糾錯(cuò)

  域名預(yù)訂/競價(jià),好“米”不錯(cuò)過

今天我們來討論一個(gè)比較重要的內(nèi)容,百度是否抓取我們網(wǎng)站js,百度蜘蛛是否識別我們網(wǎng)站js中的內(nèi)容,百度抓取js有哪些壞處,需要屏蔽js么,我們當(dāng)前這篇文章會(huì)詳細(xì)的講解這一塊的內(nèi)容!

百度是否會(huì)抓取網(wǎng)站js文件?

其實(shí)大家可以通過分析蜘蛛發(fā)現(xiàn),百度是抓取js的,以前很多人都說百度是不會(huì)抓取js和css的,其實(shí)這個(gè)說法是絕對不對的,百度不單單會(huì)抓取,還會(huì)比較頻繁,不單單百度抓取,360、搜狗、神馬搜索引擎,都會(huì)進(jìn)行抓取的。

百度蜘蛛目前是否識別js?

百度是否有能力識別js這件事,我可以明確告訴大家,是絕對可以識別的,而且90%以上的js都是可以進(jìn)行識別的,為什么這么說那,大家不妨想一下,百度出了一個(gè)“石榴算法”專門打擊頁面中大量彈窗,而彈窗廣告,大部分都是js代碼,如果百度無法識別js,又怎么去打擊這類頁面那,另外,很多違法站點(diǎn),都用js套站,如果百度識別不了js,任由這些黑客肆虐,大家認(rèn)為可能么?前幾年就已經(jīng)可以識別了,現(xiàn)在肯定識別度更高。

js需要用robots.txt進(jìn)行屏蔽抓取么?

講解一下,js文件需要用robots.txt進(jìn)行屏蔽抓取么?一直有一個(gè)爭議,css和js需要屏蔽么,其實(shí)css不需要屏蔽的,如果屏蔽了,百度快照中的樣式就會(huì)亂掉,或多或少還是有影響的,但是js是有必要屏蔽的,合理的屏蔽js,會(huì)大大優(yōu)化蜘蛛抓取性,比較利于SEO優(yōu)化,下面講解如何屏蔽這類js。

如何有效防止百度對js的抓???

1,用robots.txt屏蔽全站js,和不想抓取的js!

首先最直接的方法就是用robots.txt直接屏蔽js,屏蔽有兩種方法,第一種是徹底屏蔽,屏蔽整站js,第二種是屏蔽個(gè)別的js,我們以下圖為例,其實(shí)我比較建議屏蔽整站js,因?yàn)閖s實(shí)在對SEO沒有什么實(shí)際的作用,只會(huì)拖慢網(wǎng)站的速度。

2,用混淆加密工具,把js進(jìn)行加密

雖然用robots.txt會(huì)屏蔽一些蜘蛛抓取,但是還是有一些js還依然會(huì)抓取的,這個(gè)時(shí)候怎么辦那?我們可以用一些加密技術(shù),加密js,增加百度不識別性,這對于一些敏感內(nèi)容來說,是比較推薦使用的,比如,js里面都是廣告代碼,被百度抓取了會(huì)對網(wǎng)站產(chǎn)生不良的影響,所以進(jìn)行混淆加密會(huì)比較好一些,一般混下加密我們都會(huì)使用站長工具進(jìn)行加密(見下圖)!

3,如果是廣告,可以考慮用框架導(dǎo)入js!

第三點(diǎn),就是一些第三方廣告代碼,如果網(wǎng)站廣告比較多,js中寫的很多,單單使用混淆加密是不能完全解決的,我們可以單獨(dú)建立一個(gè)頁面來放廣告,然后用iframe導(dǎo)入進(jìn)來,百度對于iframe中的內(nèi)容一般情況下是不會(huì)抓取的,當(dāng)然了,js還是需要進(jìn)行混淆加密的,這樣就可以很大程度的緩解因?yàn)閺V告太多而被百度懲罰的事情發(fā)生。

好了,今天我們就講解這么多吧,我們總結(jié)一下,css和js這兩種,我們需要屏蔽掉js,css不需要進(jìn)行屏蔽,在robots.txt中,可以直接寫入屏蔽全站js,網(wǎng)站js百度是會(huì)抓取的,而且會(huì)進(jìn)行識別,所以如果網(wǎng)站js中廣告比較多,大家可以用框架導(dǎo)入即可。

文章來源:代代SEO博客

來源地址:https://www.daidaiseo.com/seoti/576.html

申請創(chuàng)業(yè)報(bào)道,分享創(chuàng)業(yè)好點(diǎn)子。點(diǎn)擊此處,共同探討創(chuàng)業(yè)新機(jī)遇!

相關(guān)標(biāo)簽
百度蜘蛛
網(wǎng)頁JS加載

相關(guān)文章

  • 提升網(wǎng)站圖片的優(yōu)化效果的幾種策略淺析

    雖然現(xiàn)在很多搞網(wǎng)站優(yōu)化的核心工作就是對網(wǎng)站首頁進(jìn)行優(yōu)化,認(rèn)為通過將首頁的權(quán)重提升,那么對于整個(gè)網(wǎng)站的曝光率和流量都會(huì)產(chǎn)生本質(zhì)的提升,一起來提升網(wǎng)站圖片的優(yōu)化效果的幾種策略淺析

  • 只需兩步,教你正確識別百度蜘蛛

    怎么才能識別正確的百度蜘蛛呢?來來來,只需兩步,教你正確識別百度蜘蛛

    標(biāo)簽:
    百度蜘蛛
  • 逆冬:一招教你識別百度真假蜘蛛!

    最近一個(gè)使用眾火的徒弟問我、說220和116的蜘蛛不是真蜘蛛,因?yàn)樗鹡slookup的時(shí)候,并沒有出現(xiàn)“baidu”類的字樣、反而出現(xiàn)了別的字樣,所以他感覺不真,而同樣的ip,我本地用windows電腦nslookup的確實(shí)可以出現(xiàn)“baidu”類的字樣,如下圖:

    標(biāo)簽:
    百度蜘蛛
  • 搜索引擎及搜索引擎蜘蛛是什么?

    很多新人SEO同學(xué)很少接觸到搜索引擎蜘蛛,即使百度蜘蛛也未必能接觸到。即使接觸到了,也不知道它是不是。為什么呢?因?yàn)楹芏郤EO新人沒有分析網(wǎng)站日志,所以沒看到。

    標(biāo)簽:
    搜索引擎
    百度蜘蛛
  • 百度蜘蛛抓取不存在目錄 對應(yīng)的解決方法

    相信大家在分析百度蜘蛛日志的時(shí)候經(jīng)常會(huì)發(fā)現(xiàn)一個(gè)問題,就是百度蜘蛛經(jīng)常會(huì)抓取一些不存在的目錄,比如:我網(wǎng)站沒有這些目錄,但是百度蜘蛛一直在抓取,或者你會(huì)發(fā)現(xiàn)百度蜘蛛在抓取自己的隱私目錄

    標(biāo)簽:
    百度蜘蛛
    蜘蛛抓取

熱門排行

信息推薦