首先是通過互聯網進行網頁抓取，把準備好的URL隊列里的網頁內容全部獲取出來。然后把獲取到的數據進行預處理操作，進行初步的去重，去燥，再按照既定的規則進行數據檢索，從而得到需要的數據展示給用戶。