深度解析： Understanding the Mechanics of Google's Crawler Distribution 。 Spider Pool 是 Search Engines 为了 高效处理 Gigantic Volumes of Websites 而 Created System。它将 Pages 分配给 不同的爬虫 ，以 最大化抓取速度 。 Spider Pool Applications| Algorithm Updates 、Website Optimization 、搜索结果排名 等 �