裝載記錄是任務運行時,爬蟲加載的采集任務記錄,存儲了已采集的歷史日志和待采集的任務。因此不僅僅可以通過日志查看采集歷史,還可以通過控制爬蟲裝載的任務類型,為采集的運行提供多樣化的采集策略。
當采集策略選擇了“不重采數據頁面”、“更新數據頁面”、“繼續上次采集”時,如果需要重新采集當前任務,就需要刪除當前的日志記錄。
當采集策略選擇了“全部重采”、“只掃描入口頁”時,系統會自動清除日志記錄。
【歷史裝載記錄】
1.導入/導出
可以導入本地上的日志,或將當前的日志列表導出到本地(log格式)。
2.刷新
點擊刷新,將日志列表刷新至最新狀態。
3.刪除
點擊刪除當前日志列表,刪除后不可恢復。可以結合運行設置-加載日志宏進行篩選刪除。