搜索引擎的蜘蛛spider会不断爬行互联网数据，如果网站没有做出防止搜索引擎抓取的操作，就很容易被搜索引擎收录，这篇文章主要讲解如何防止百度，360等搜索引擎收录网站内容。
方法一：robots.txt
User-agent:*表示和所有搜索引擎协议适用；
Disallow:/表示禁止抓取收录全站。
禁止所有内容：
User-agent: *
Disallow: /禁止访问网站的所有部分：
User-agent: *
Disallow: /css/
Disallow: /js/
Disallow: /admin/禁止所有的搜索引擎访问css、js、admin目录。如果您的网站设置了robots.txt文件，如果在搜索结果中出现您网站的相关信息，那搜索结果中展示的一般是其他网站对您相关网页的描述。
方法二：网页代码方法
<head>与</head>之间设置meta:
<meta name="robots" content="noarchive">通过这样设置就可以禁止搜索引擎抓取网站并显示网页快照。要允许其他搜索引擎显示快照，但仅防止百度显示，请使用以下标记：
<meta name="Baiduspider" content="noarchive">方法三：判断访问来源
在服务器端判断访问来源，如果是蜘蛛的IP直接404或者阻止它访问即可。
备注：
如果后面加了禁止代码，但是搜索引擎还可以搜索出来，因为搜索引擎索引数据库的更新需要时间。虽然Baiduspider已经停止访问您网站上的网页，但百度搜索引擎数据库中已经建立的网页索引信息，可能需要数月时间才会清除。
html/css解决inline-block内联元素间隙的多种方法总汇
inline-blcok元素中间的空白符引起的间隙，处理方法总结包括：改变书写结构、使用font-size:0、使用margin负值、使用letter-spacing或word-spacing、丢失结束标签、W3C推荐 导航方法（兼容IE6等）、YUI的inline-block间隙处理等...
JS实现碰撞检测的方法分析
本文实例讲述了JS实现碰撞检测的方法。分享给大家供大家参考，具体如下：一个简单的碰撞检测例子，检测div1是否和div2发生碰撞，当div1碰到div2时，改变div2的颜色
js中math方法_整理js中常用的math方法总结
记录下与Math有关的常用方法，如：求最大值、最小值等，或者是保留几位数啥的。本文主要介绍了JavaScript中Math对象的方法，具有一定的参考价值，下面跟着小编一起来看下吧
js中split,splice,slice方法之间的差异_splice()、slice()、split()函数的区分
Split是切割字符串的一种方法，该方法主要用于把一个字符串分割成字符串数组。splice()方法向/从数组中添加/删除元素，然后返回被删除的元素组成的数组。slice()方法主要用于截取数组，并返回截取到的新数组。
JS获取当前时间戳的方法
第一种：获取的时间戳是把毫秒改成000显示，因为这种方式只精确到秒，第二种和第三种是获取了当前毫秒的时间戳。
js 实现二级联动
在web开发中我们经常会遇到页面的一个二级联动技术,二级联动字面解释就是说我在选择一级select不同的option,下面的二级option的属性值在进行相应的变化。
常用原生JS方法总结（兼容性写法）
经常会用到原生JS来写前端。。。但是原生JS的一些方法在适应各个浏览器的时候写法有的也不怎么一样的,一下的方法都是包裹在一个EventUtil对象里面的，直接采用对象字面量定义方法了
js 操作剪贴板
是通过 js 操作 textarea input 输入框，只能操作输入框，不能操作其它元素。所有的 复制／剪切／粘贴 都是要在选中输入框中的文本之后，才进行操作的。
js async的常用方法
async函数是Generator 函数的语法糖，async函数就是将 Generator 函数的星号（*）替换成async，将yield替换成await，仅此而已。async函数对Generator 函数的改进点有以下几点：
js返回上一页的实现方法
下面是常用代码：如果是用按钮做的话就是：用图片做的话就是：[color=#FF0000]几秒钟后[/color]自动返回上一页代码:（加入两个head间，3000表示3秒）
内容以共享、参考、研究为目的,不存在任何商业目的。其版权属原作者所有,如有侵权或违规,请与小编联系!情况属实本人将予以删除!