文章摘要： 　　 　　看了站长学院的网站建造篇,对曾经含糊的概念有了一些了解,发现有些东西也许许多人的了解都是错的,下面记下我之前不明白的当地. 　　沙盒蜘蛛和降权蜘蛛 　　经过IP来分辩baidu蜘蛛的特点对错常可笑的工作，所谓的“沙盒蜘蛛”“降权蜘蛛”等等是历来都不存在的。 ​ 　　robots写法 　　robots写法中disallow. …

　　

　　看了站长学院的网站建造篇,对曾经含糊的概念有了一些了解,发现有些东西也许许多人的了解都是错的,下面记下我之前不明白的当地.

　　沙盒蜘蛛和降权蜘蛛

　　经过IP来分辩baidu蜘蛛的特点对错常可笑的工作，所谓的“沙盒蜘蛛”“降权蜘蛛”等等是历来都不存在的。

​
　　robots写法

　　robots写法中disallow. “Disallow:/help”制止robot拜访/help.html、/helpabc.html、/help/index.html，而”Disallow:/help/”则答应robot拜访/help.html、/helpabc.html，不能拜访/help/index.html。

　　别的制止baidu录入办法

　　nofollow：制止查找引擎盯梢本页面上的连接如果您不想查找引擎追寻此页面上的连接，且不传递连接的权重，请将此元符号置入页面的有些：

　　如果您不想baidu追寻某一条特定连接，baidu还支撑更准确的操控，请将此符号直接写在某条连接上：signin

　　要答应别的查找引擎盯梢，但仅避免baidu盯梢您页面的连接，请将此元符号置入页面的有些：

　　noarchive：制止查找引擎在查找成果中显现页面快照

　　要避免一切查找引擎显现您网站的快照，请将此元符号置入页面的有些：

　　要答应别的查找引擎显现快照，但仅避免baidu显现，请使用以下符号：

　　注：此符号仅仅制止baidu显现该页面的快照，baidu会持续为页面建索引，并在查找成果中显现页面摘要。

　　以上这几点是我曾经也许不熟悉的,发现站长学院如今做的挺好的,我们有爱好的话能够看看,能够让你学到不少优化方面的常识.