我们分析网站日志时会发现搜索引擎会偶尔爬取JS和CSS文件，如果路径没有错，那就不用担心，这是搜索引擎在了解我们网站的代码、结构、排版、渲染、内容，也就是在熟悉网站全套环境，如果出现比较频次的爬取JS和CSS文件就应该注意了，很有可能网站出现堵塞和阻拦，但是又没有禁止搜索引擎蜘蛛爬取，有的可能因为网站程序和架构原因不适合蜘蛛爬取，这就会浪费蜘蛛资源，对网站权重不利。
网站JS和CSS文件要告知搜索引擎
有时候网站需要满足观看阅读效果，会采用较大的渲染和调用，而搜索引擎需要对网站作出页面合格率的判断，这个时候为了避免搜索引擎误判或者蜘蛛无法理解网站页面效果，就必须作出引导告知的标明。
搜索引擎不是像人为观看去判断网站页面情况，而是通过爬取层层代码结构进行分析判断，网站及图片的宽度长度、位置、文字显示、内容展览等等，就算是抓取网站内容也是直接从指定特征的代码段落中提取。
网站JS和CSS文件不要隐藏抓取不到
有些网站考虑到安全问题，会隐藏JS和CSS文件，其实这是多此一举的，而且会导致搜索引擎无法抓取JS和CSS文件去了解网站情况，最常见的隐藏就是多层级跳链和递链，这种链接方式在搜索引擎面前就很容易被判断为死链，最终导致误判网站处于异常状态。
尤其是网站内容含在JS文件封装的，最好给搜索引擎一条简单直接的路径爬取分析，避免网站内容不被抓取收录。
网站始终要保持对搜索引擎的开放，如果涉及到安全机密的JS和CSS可以单独做个文件隐藏加密，不建议禁止搜索引擎蜘蛛爬取。