【搜索引擎蜘蛛的作用是什么 搜索引擎蜘蛛对链接的重要程度判定按照什么原则】搜索引擎蜘蛛的作用是通过这些搜索引擎蜘蛛的爬行 ， 会自动将网页添加到搜索引擎的数据库当中 ， 搜索引擎蜘蛛会自动判断网页的质量 ， 根据既定的程序判断是否抓取 。
搜索引擎蜘蛛 ， 又称网页蜘蛛 。本意为搜索引擎机器人（robot） ， 称为蜘蛛的原因是将互联网比喻成蜘蛛网 ， 将机器人比喻成了在网上爬行的蜘蛛 ， 是搜索引擎自动抓取网页的程序 。
其作用是通过这些搜索引擎蜘蛛的爬行 ， 会自动将网页添加到搜索引擎的数据库当中 ， 搜索引擎蜘蛛会自动判断网页的质量 ， 根据既定的程序判断是否抓取 。
如果你想获得搜索引擎蜘蛛的亲赖 ， 希望它天天爬行抓取网页的话 ， 那就需要持续保持原创文章的更新 ， 并且定期交换友情链接 。如果你不希望某个搜索引擎的蜘蛛来抓取你的网页 ， 可以通过设置robots.txt来禁止抓取 。
