鹿泽鹿泽  2024-08-14 08:55:59 鹿泽笔记 隐藏边栏  0 

今天我们来讨论一个比较重要的内容,百度是否抓取我们网站js,百度蜘蛛是否识别我们网站js中的内容?这个问题我相信很多站长都有相同的疑问,很多文章也说了,不要用JavaScript代码来布局导航栏,尽量用文字代替的说法。

其实大家可以通过分析蜘蛛发现,百度是抓取js的,以前很多人都说百度是不会抓取js和css的,其实这个说法是绝对不对的,百度不单单会抓取,还会比较频繁,不单单百度抓取,360、搜狗、神马搜索引擎,都会进行抓取的。

js需要用robots.txt进行屏蔽抓取吗?

其实css不需要屏蔽的,如果屏蔽了,抓取的很多样式就会乱掉,或多或少还是有影响的,但是js是有必要屏蔽的,合理的屏蔽js,会大大优化蜘蛛抓取性,比较利于seo优化,下面讲解如何屏蔽这类js。

1、用robots.txt屏蔽全站js,和不想抓取的js

首先最直接的方法就是用robots.txt直接屏蔽js,屏蔽有两种方法,第一种是彻底屏蔽,屏蔽整站js,第二种是屏蔽个别的js,其实我比较建议屏蔽整站js,因为js实在对SEO没有什么实际的作用,只会拖慢网站的速度。

2、用混淆加密工具,把js进行加密

虽然用robots.txt会屏蔽一些蜘蛛抓取,但是还是有一些js依然会被抓取的,这个时候我们可以用一些加密技术,加密js,增加百度不识别性,比如,js里面都是广告代码,被百度抓取了会对网站产生不良的影响,所以进行混淆加密会比较好一些。

3、如果是广告,可以考虑用框架导入js

就是一些第三方广告代码,如果网站广告比较多,js中写的很多,单单使用混淆加密是不能完全解决的,我们可以单独建立一个页面来放广告,然后用iframe导入进来,百度对于iframe中的内容一般情况下是不会抓取的,当然了,js还是需要进行混淆加密的,这样就可以很大程度的缓解因为广告太多而被搜索引擎惩罚的事情发生。

我们总结一下,css和js这两种,我们需要屏蔽掉js,css不需要进行屏蔽,在robots.txt中,可以直接写入屏蔽全站js,网站js百度是会抓取的,而且会进行识别,所以如果网站js中广告比较多,大家可以用框架导入即可。

1、文章版权归作者所有,未经允许请勿转载。
2、本站所有文章,如无特殊说明或标注,均为本站原创发布。任何在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们邮箱:526009505@qq.com进行处理。
3、咨询请联系QQ:526009505