如何在java代碼中使用HTTP代理IP。
以下代碼主要圍繞第一次接觸HTTP代理IP的java新手來寫。
直接把下面示例代碼中的代理API,替換成你后臺生成的代理API鏈接,就可以跑起來了。(步驟注釋清晰)
以下只是一個示例代碼,是一個基礎的演示,具體的代碼還是要根據你業務的實際情況去寫的。
示例代碼中的HTTP代理IP,我使用的是華益云的HTTP代理,注冊就白嫖1萬個高匿爬蟲IP,有效期是一年,對于調試代碼來說這個時間是非常的友好。
打開代理API,獲取里面的IP,使用IP訪問目標網站,其實代碼中就是執行這個過程而已,然后加了幾個錯誤判斷有助于代碼的穩定運行。(步驟注釋清晰)
華益云-企業級HTTP爬蟲代理IP供應商-點我免費領取示例代碼demo中同款10000個高匿IP
import java.io.BufferedReader; import java.io.BufferedWriter; import java.io.DataOutputStream; import java.io.FileWriter; import java.io.IOException; import java.io.InputStreamReader; import java.net.HttpURLConnection; import java.net.InetSocketAddress; import java.net.URL; import java.util.ArrayList; import java.net.Proxy; class ProxyInfo{ private String host; private int port; public ProxyInfo(String host, int port){ this.host = host; this.port = port; } public String getHost(){ return host; } public int getPort(){ return port; } } class ProxyUtil{ public static void main(String[] args) { // 發送給服務器的標識 String userAgent = "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/532.36 (KHTML, like Gecko) Chrome/97.0.4692.99 Safari/537.36"; // 代理api(這里我推薦使用www.9vps.com華益云的HTTP代理API,注冊就白嫖1萬IP) String proxyUrl = "http://http.9vps.com/getip.asp?username=166xxxx6597&pwd=xxxxbaa59ce237dff65134984b9cxxxx&geshi=1&fenge=1&fengefu=&Contenttype=1&getnum=20&setcity=&operate=all&"; // 請求代理url,獲取代理ip ArrayList outPutProxy = getProxy(proxyUrl, userAgent); if (outPutProxy.size() == 0){ // 沒有獲取到代理 return; } // 目標請求網站 String url = "https://www.qq.com/"; for (int i=0; i<3; i++){ // 最多嘗試三次 try{ ProxyInfo px =outPutProxy.remove(0); Proxy proxy = new Proxy(Proxy.Type.HTTP, new InetSocketAddress(px.getHost(), px.getPort())); String out = doReqWithProxyWrapper(url, userAgent, proxy); System.out.println(out); break; }catch(Exception e){ e.printStackTrace(); if (outPutProxy.size() == 0){ // 如果發現沒有代理了,就去獲取下。 outPutProxy = getProxy(proxyUrl, userAgent); } } } //System.out.println(out); } public static String doReqWithProxyWrapper(String url,String userAgent,Proxy proxy) throws IOException{ return requestGet(url, userAgent, proxy); } public static ArrayList getProxy(String proxyUrl, String userAgent){ //String proxyUrl = "http://http.9vps.com/getip.asp?username=166xxxx6597&pwd=xxxxbaa59ce237dff65134984b9cxxxx&geshi=1&fenge=1&fengefu=&Contenttype=1&getnum=20&setcity=&operate=all&"; String proxyIps; ArrayList outPutProxy = new ArrayList(); try { proxyIps = requestGet(proxyUrl, userAgent, null); System.out.println(proxyIps); // {"code":3002,"data":[],"msg":"error!用戶名或密碼錯誤","success":false} if (proxyIps.indexOf("{") > -1){ throw new RuntimeException("[錯誤]"+proxyIps); } String[] splitedString = proxyIps.split("\n"); for (int i=0; i;>
審核編輯:湯梓紅
聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。
舉報投訴
-
JAVA
+關注
關注
19文章
2967瀏覽量
104752 -
HTTP
+關注
關注
0文章
505瀏覽量
31227 -
代碼
+關注
關注
30文章
4788瀏覽量
68612
發布評論請先 登錄
相關推薦
如何在EDK中使用自己的 IP核?
如何在EDK中使用自己的 IP核呢? 這是很多人夢寐以求的事情。然而在EDK以及ISE的各種文檔中對此卻遮遮掩掩,欲語還休。
發表于 02-11 13:35
?2166次閱讀
HTTP代理應該怎么選擇?
在互聯網中使用HTTP代理IP確實給我們的日常生活帶來很多便利,也正因為如此,市面上的同款產品越來越多,很多用戶在選擇的時候難免陷入困境,不知道該如何下手才好。
發表于 01-04 17:37
?379次閱讀
python代碼中如何使用HTTP代理
華益云HTTP代理API有效期是一年,也就是說一年內這1萬IP用完就沒了,如果你一年都用不完那到時候剩余IP才會被清零,對于調試代碼來說時間
評論