图 12–1 展示 robot 如何检查 URL 及其相关的网络资源。枚举器和生成器对每个资源进行测试。如果资源通过了枚举器测试,则 robot 检查它以获取附加 URL。如果资源通过了生成器测试,robot 会为其生成资源描述,该资源描述存储在搜索服务器数据库中。