java抓取網頁數據示例

下面舉例說明：

抓取百度首頁的內容：

代碼如下：

URL url = new URL("http://www.baidu.com");
HttpURLConnection urlCon=(HttpURLConnection)url.openConnection();
urlCon.setConnectTimeout(50000);
urlCon.setReadTimeout(300000);
DataInputStream fIn;
byte[] content = new byte[MAX_FILE_SIZE];
fIn = new DataInputStream(urlCon.getInputStream());
int size = 0,f_size = 0;
while((size = fIn.read(content,f_size,2048))> 0){
    f_size += size;
}

在代碼中我們將百度首頁的內容存儲到了一個byte數組中，當然我們有了 IO流以後還可以存儲到文件中去了。