篩選器程序的階段

列舉篩選器與產生篩選器的篩選程序中都擁有五個階段。

• 設定 – 執行初始化作業。在網頁抓取程式的有效期中只會發生一次。

• 中介資料 – 根據資源可用的中介資料篩選資源。在網路上擷取資源之前，對每個資源會執行一次中介資料篩選。表 19–1 列出常用中介資料類型的範例。

• 資料 – 根據其資料篩選資源。在網路上擷取資料後，會篩選每個資源的資料一次。可用於篩選的資料包括：

  • content-type

  • content-length

  • content-encoding

  • content-charset

  • last-modified

  • expires

• 列舉 – 列舉目前資源，以決定該資源是否指向其他待檢查的資源。

• 產生 – 為資源產生資源描述 (Resource Description, RD)，並將其儲存至搜尋伺服器資料庫中。

• 關閉 – 執行任何必須的終止作業。在網頁抓取程式有效期中，此程序會發生一次。