|
|
第一：創(chuàng)建HttpURLConnection
第二：打開(kāi)URL，創(chuàng)建一個(gè)InputStream
第三：逐行（逐字節(jié)）讀取，如果需要，轉(zhuǎn)換編碼，放入字符串。
好，一下就開(kāi)始代碼吧：
復(fù)制代碼 代碼如下:
public String getUrlContent(String path){
String rtn = "";
int c;
try{
Java.NET.URL l_url = new Java.NET.URL(path);
Java.NET.HttpURLConnection l_connection = (Java.NET.HttpURLConnection) l_url.openConnection();
l_connection.setRequestProperty("User-agent","Mozilla/4.0");
l_connection.connect();
InputStream l_urlStream = l_connection.getInputStream();
while (( ( c= l_urlStream.read() )!=-1)){
int all=l_urlStream.available();
byte[] b =new byte[all];
l_urlStream.read(b);
rtn+= new String(b, "UTF-8");
}
//Thread.sleep(2000);
l_urlStream.close();
}catch(Exception e){
e.printStackTrace();
}
return rtn;
}
其中
l_connection.setRequestProperty("User-agent","Mozilla/4.0");
這句是必須的，很多服務(wù)器對(duì)于沒(méi)有User-agent頭的請(qǐng)求直接403了就。
然后采用InputStream.available()來(lái)一次性讀取，返回此輸入流方法的下一個(gè)調(diào)用方可以不受阻塞地從此輸入流讀取（或跳過(guò)）的字節(jié)數(shù)，如果需要的話，可以在后面稍微Sleep一下線程：
Thread.sleep(2000);
其中的
復(fù)制代碼 代碼如下:
while (( ( c= l_urlStream.read() )!=-1)){
int all=l_urlStream.available();
byte[] b =new byte[all];
l_urlStream.read(b);
rtn+= new String(b, "UTF-8");
}
是個(gè)很重要的讀取過(guò)程，c表示讀取流的標(biāo)注，當(dāng)結(jié)束的時(shí)候是-1，然后all是本次循環(huán)可用的最大字節(jié)數(shù)目，然后讀取全部可用字節(jié)到byte[] b中，然后轉(zhuǎn)換成UTF-8類型的字符串，注意，這里可以自己寫(xiě)方式，如果讀取GB2312，就要寫(xiě)GB2312，至于有沒(méi)有萬(wàn)能的，可以獲取Meta，匹配下。自己想辦法吧。
jsp技術(shù)：Java 獲取URL的內(nèi)容，轉(zhuǎn)載需保留來(lái)源！
鄭重聲明：本文版權(quán)歸原作者所有，轉(zhuǎn)載文章僅為傳播更多信息之目的，如作者信息標(biāo)記有誤，請(qǐng)第一時(shí)間聯(lián)系我們修改或刪除，多謝。
