程序師世界是廣大編程愛好者互助、分享、學習的平台,程序師世界有你更精彩!
首頁
編程語言
C語言|JAVA編程
Python編程
網頁編程
ASP編程|PHP編程
JSP編程
數據庫知識
MYSQL數據庫|SqlServer數據庫
Oracle數據庫|DB2數據庫
 程式師世界 >> 編程語言 >> 更多編程語言 >> 編程綜合問答 >> 設置-nutch TopN 50萬 depth 10 獲取到6萬多數據

設置-nutch TopN 50萬 depth 10 獲取到6萬多數據

編輯:編程綜合問答
nutch TopN 50萬 depth 10 獲取到6萬多數據

我用nutch1.9搜索阿裡巴巴的網站,使用的是bin/crawl 腳本執行的,topN設置的50萬,爬行深度設置的10,url過濾只允許阿裡巴巴的網站,但是實際搜出來的結果卻只有6萬多,又人知道大概是什麼原因嗎困擾了好幾天了。。。。。求教

最佳回答:


網站發現你爬蟲,ban了你的請求

  1. 上一頁:
  2. 下一頁:
Copyright © 程式師世界 All Rights Reserved