Google 蜘蛛池，被指为 Google 爬虫 集群，是一个巨大的 系统，负责索引 网上各个网站的信息。它主要 功能是帮助Google 查询 引擎快速 地返回用户查询 的相关结果。 https://bookmark-share.com/story21251369/深入分析-google-蜘蛛池