舞蹈美女视频,杨幂穿丝袜视频,范冰冰浴室视频

Java發(fā)送Http請(qǐng)求，解析html返回

2009.12.01

今天是2008年7月7日星期一，下午一直在學(xué)校做個(gè)人開(kāi)始頁(yè)面。因?yàn)殡x不開(kāi)google的翻譯，所以想把google的翻譯整合到我的開(kāi)始頁(yè)面中來(lái)，于是乎就遇到了一個(gè)問(wèn)題，怎樣使用java程序發(fā)送http請(qǐng)求然后截獲遠(yuǎn)程服務(wù)器返回的數(shù)據(jù)進(jìn)行適當(dāng)處理之后再輸出？另外，google的翻譯頁(yè)面是使用post的方法提交數(shù)據(jù)的，無(wú)法直接通過(guò)網(wǎng)址進(jìn)行處理，于是乎，這又涉及到了一個(gè)怎樣使用java去post數(shù)據(jù)的問(wèn)題。
經(jīng)過(guò)拜讀百度知道的提問(wèn)（花了我20分），找到了一個(gè)htmlparser的jar包組件，據(jù)說(shuō)是可以很高效率的進(jìn)行html的解析。于是乎，立馬下載了一個(gè)過(guò)來(lái)。（文后附件中有）試了一下果然不錯(cuò)。同時(shí)，在這個(gè)過(guò)程中也學(xué)會(huì)了怎樣利用java來(lái)和其它網(wǎng)站交互，這可是一個(gè)非常不錯(cuò)的功能，配合htmlparser，可以隨心所欲的截取別人網(wǎng)站的信息了！
廢話不多說(shuō)了，下面是具體的使用步驟。

首先，向一個(gè)Web站點(diǎn)發(fā)送POST請(qǐng)求只需要簡(jiǎn)單的幾步:
注意，這里不需要導(dǎo)入任何第三方包

Java代碼

package com.test;
import java.io.BufferedReader;
import java.io.IOException;
import java.io.InputStream;
import java.io.InputStreamReader;
import java.io.OutputStreamWriter;
import java.net.URL;
import java.net.URLConnection;
public class TestPost {
public static void testPost() throws IOException {
/**
* 首先要和URL下的URLConnection對(duì)話。 URLConnection可以很容易的從URL得到。比如： // Using
* java.net.URL and //java.net.URLConnection
*/
URL url = new URL("http://www.faircanton.com/message/check.asp");
URLConnection connection = url.openConnection();
/**
* 然后把連接設(shè)為輸出模式。URLConnection通常作為輸入來(lái)使用，比如下載一個(gè)Web頁(yè)。
* 通過(guò)把URLConnection設(shè)為輸出，你可以把數(shù)據(jù)向你個(gè)Web頁(yè)傳送。下面是如何做：
*/
connection.setDoOutput(true);
/**
* 最后，為了得到OutputStream，簡(jiǎn)單起見(jiàn)，把它約束在Writer并且放入POST信息中，例如： ...
*/
OutputStreamWriter out = new OutputStreamWriter(connection
.getOutputStream(), "8859_1");
out.write("username=kevin&password=*********"); //post的關(guān)鍵所在！
// remember to clean up
out.flush();
out.close();
/**
* 這樣就可以發(fā)送一個(gè)看起來(lái)象這樣的POST：
* POST /jobsearch/jobsearch.cgi HTTP 1.0 ACCEPT:
* text/plain Content-type: application/x-www-form-urlencoded
* Content-length: 99 username=bob password=someword
*/
// 一旦發(fā)送成功，用以下方法就可以得到服務(wù)器的回應(yīng)：
String sCurrentLine;
String sTotalString;
sCurrentLine = "";
sTotalString = "";
InputStream l_urlStream;
l_urlStream = connection.getInputStream();
// 傳說(shuō)中的三層包裝阿！
BufferedReader l_reader = new BufferedReader(new InputStreamReader(
l_urlStream));
while ((sCurrentLine = l_reader.readLine()) != null) {
sTotalString += sCurrentLine + "\r\n";
}
System.out.println(sTotalString);
}
public static void main(String[] args) throws IOException {
testPost();
}
}

package com.test;
import java.io.BufferedReader;
import java.io.IOException;
import java.io.InputStream;
import java.io.InputStreamReader;
import java.io.OutputStreamWriter;
import java.net.URL;
import java.net.URLConnection;
public class TestPost {
public static void testPost() throws IOException {
/**
* 首先要和URL下的URLConnection對(duì)話。 URLConnection可以很容易的從URL得到。比如： // Using
*  java.net.URL and //java.net.URLConnection
*/
URL url = new URL("http://www.faircanton.com/message/check.asp");
URLConnection connection = url.openConnection();
/**
* 然后把連接設(shè)為輸出模式。URLConnection通常作為輸入來(lái)使用，比如下載一個(gè)Web頁(yè)。
* 通過(guò)把URLConnection設(shè)為輸出，你可以把數(shù)據(jù)向你個(gè)Web頁(yè)傳送。下面是如何做：
*/
connection.setDoOutput(true);
/**
* 最后，為了得到OutputStream，簡(jiǎn)單起見(jiàn)，把它約束在Writer并且放入POST信息中，例如： ...
*/
OutputStreamWriter out = new OutputStreamWriter(connection
.getOutputStream(), "8859_1");
out.write("username=kevin&password=*********"); //post的關(guān)鍵所在！
// remember to clean up
out.flush();
out.close();
/**
* 這樣就可以發(fā)送一個(gè)看起來(lái)象這樣的POST：
* POST /jobsearch/jobsearch.cgi HTTP 1.0 ACCEPT:
* text/plain Content-type: application/x-www-form-urlencoded
* Content-length: 99 username=bob password=someword
*/
// 一旦發(fā)送成功，用以下方法就可以得到服務(wù)器的回應(yīng)：
String sCurrentLine;
String sTotalString;
sCurrentLine = "";
sTotalString = "";
InputStream l_urlStream;
l_urlStream = connection.getInputStream();
// 傳說(shuō)中的三層包裝阿！
BufferedReader l_reader = new BufferedReader(new InputStreamReader(
l_urlStream));
while ((sCurrentLine = l_reader.readLine()) != null) {
sTotalString += sCurrentLine + "\r\n";
}
System.out.println(sTotalString);
}
public static void main(String[] args) throws IOException {
testPost();
}
}

執(zhí)行的結(jié)果：（果真是返回了驗(yàn)證后的html阿！神奇！）

Html代碼

<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=gb2312" />
<title>賬戶已經(jīng)凍結(jié)</title>
<style type="text/css">
<!--
.temp {
font-family: Arial, Helvetica, sans-serif;
font-size: 14px;
font-weight: bold;
color: #666666;
margin: 10px;
padding: 10px;
border: 1px solid #999999;
}
.STYLE1 {color: #FF0000}
-->
</style>
</head>
<body>
<p> </p>
<p> </p>
<p> </p>
<table width="700" border="0" align="center" cellpadding="0" cellspacing="0" class="temp">
<tr>
<td width="135" height="192"><div align="center"><img src="images/err.jpg" width="54" height="58"></div></td>
<td width="563"><p><span class="STYLE1">登錄失敗</span><br>
<br>
您的帳戶活躍指數(shù)低于系統(tǒng)限制，您的帳戶已經(jīng)被暫時(shí)凍結(jié)。<br>
請(qǐng)您聯(lián)系網(wǎng)絡(luò)主管或者人事主管重新激活您的帳戶。</p>
</td>
</tr>
</table>
<p> </p>
</body>
</html>

<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=gb2312" />
<title>賬戶已經(jīng)凍結(jié)</title>
<style type="text/css">
<!--
.temp {
font-family: Arial, Helvetica, sans-serif;
font-size: 14px;
font-weight: bold;
color: #666666;
margin: 10px;
padding: 10px;
border: 1px solid #999999;
}
.STYLE1 {color: #FF0000}
-->
</style>
</head>
<body>
<p> </p>
<p> </p>
<p> </p>
<table width="700" border="0" align="center" cellpadding="0" cellspacing="0" class="temp">
<tr>
<td width="135" height="192"><div align="center"><img src="images/err.jpg" width="54" height="58"></div></td>
<td width="563"><p><span class="STYLE1">登錄失敗</span><br>
<br>
您的帳戶活躍指數(shù)低于系統(tǒng)限制，您的帳戶已經(jīng)被暫時(shí)凍結(jié)。<br>
請(qǐng)您聯(lián)系網(wǎng)絡(luò)主管或者人事主管重新激活您的帳戶。</p>
</td>
</tr>
</table>
<p> </p>
</body>
</html>

一些Web站點(diǎn)用POST形式而不是GET，這是因?yàn)镻OST能夠攜帶更多的數(shù)據(jù)，而且不用URL，這使得它看起來(lái)不那么龐大。使用上面列出的大致的代碼，Java代碼可以和這些站點(diǎn)輕松的實(shí)現(xiàn)對(duì)話。

得到html以后，分析內(nèi)容就顯得相對(duì)輕松了?，F(xiàn)在就可以使用htmlparser了，下面是一個(gè)簡(jiǎn)單的示例程序，過(guò)多的解釋我就不說(shuō)了，相信代碼能夠說(shuō)明一切的！

Java代碼

package com.test;
import org.htmlparser.Node;
import org.htmlparser.NodeFilter;
import org.htmlparser.Parser;
import org.htmlparser.filters.TagNameFilter;
import org.htmlparser.tags.TableTag;
import org.htmlparser.util.NodeList;
/**
* 標(biāo)題:利用htmlparser提取網(wǎng)頁(yè)純文本的例子
*/
public class TestHTMLParser {
public static void testHtml() {
try {
String sCurrentLine;
String sTotalString;
sCurrentLine = "";
sTotalString = "";
java.io.InputStream l_urlStream;
java.net.URL l_url = new java.net.URL("http://www.ideagrace.com/html/doc/2006/07/04/00929.html");
java.net.HttpURLConnection l_connection = (java.net.HttpURLConnection) l_url.openConnection();
l_connection.connect();
l_urlStream = l_connection.getInputStream();
java.io.BufferedReader l_reader = new java.io.BufferedReader(new java.io.InputStreamReader(l_urlStream));
while ((sCurrentLine = l_reader.readLine()) != null) {
sTotalString += sCurrentLine+"\r\n";
// System.out.println(sTotalString);
}
String testText = extractText(sTotalString);
System.out.println( testText );
} catch (Exception e) {
e.printStackTrace();
}
}
public static String extractText(String inputHtml) throws Exception {
StringBuffer text = new StringBuffer();
Parser parser = Parser.createParser(new String(inputHtml.getBytes(),"GBK"), "GBK");
// 遍歷所有的節(jié)點(diǎn)
NodeList nodes = parser.extractAllNodesThatMatch(new NodeFilter() {
public boolean accept(Node node) {
return true;
}
});
System.out.println(nodes.size()); //打印節(jié)點(diǎn)的數(shù)量
for (int i=0;i<nodes.size();i++){
Node nodet = nodes.elementAt(i);
//System.out.println(nodet.getText());
text.append(new String(nodet.toPlainTextString().getBytes("GBK"))+"\r\n");
}
return text.toString();
}
public static void test5(String resource) throws Exception {
Parser myParser = new Parser(resource);
myParser.setEncoding("GBK");
String filterStr = "table";
NodeFilter filter = new TagNameFilter(filterStr);
NodeList nodeList = myParser.extractAllNodesThatMatch(filter);
TableTag tabletag = (TableTag) nodeList.elementAt(11);
}
public static void main(String[] args) throws Exception {
// test5("http://www.ggdig.com");
testHtml();
}
}

本站僅提供存儲(chǔ)服務(wù)，所有內(nèi)容均由用戶發(fā)布，如發(fā)現(xiàn)有害或侵權(quán)內(nèi)容，請(qǐng)點(diǎn)擊舉報(bào)。

打開(kāi)APP，閱讀全文并永久保存查看更多類似文章

JSP抓取網(wǎng)頁(yè)代碼的程序

HTMLParser使用詳解（1）- 初始化Parser

Java 項(xiàng)目生成靜態(tài)頁(yè)面的代碼

java 發(fā)送post請(qǐng)求

JAVA 網(wǎng)絡(luò)程序

Android

更多類似文章 >>

国产一级a片免费看高清,亚洲熟女中文字幕在线视频,黄三级高清在线播放,免费黄色视频在线看