2. 程式人生 > >java網路程式設計-HTTP和URLConnection

java網路程式設計-HTTP和URLConnection

阿新 • • 發佈：2019-02-06

HTTP和URLConnection

標籤（空格分隔）： java網路程式設計

HTTP

get請求是一個空行結束，也就是\r\n\r\n

CookieManager

啟用cookie：

CookieManager manager = new CookieManager();
CookieHandler.setDefault(manager);

接受策略：

CookiePolicy.ACCEPT_ALL接受所有cookie
CookiePolicy.ACCEPT_NONE不接受任何cookie
CookiePolicy.ACCEPT_ORIGINAL_SERVER只接受第一坊cookie

使用：

manager.setCookiePolicy(CookiePolicy.ACCEPT_ORIGINAL_SERVER)

自定義：實現CookiePolicy介面：

public boolean  shouldAccept(URI uri, HttpCookie cookie)

例如：

 public class NoGovernmentCookies implements CookiePolicy{
     @overide
     public boolean shouldAccept(URI uri, HttpCookie cookie){
         if
 
 (uri.getAuthority().toLowerCase().endsWith(".gov")
             || cooke.getDomain().toLowerCase().endsWith(".gov")){
             return false;//阻止
             }
         }
         return true;
     }
 }

URLConnection

是一個抽象類，表示指向URL指定資源的活動連線
使用該類的一般步驟（不一定全部執行）：

1. 構造一個URL物件
2. 呼叫openConnection建立URLConnection物件
3. 配置URLConnection
3. 讀取首部欄位
5. 獲取輸入流並讀取資料
6. 獲取輸出流並寫入資料
7. 關閉連線

第一次構造URLConnection時，是沒有socket連線這兩個主機，connect()方法在本地和遠端主機之間建立一個連線。同時對於getInputStream(),getContent(),getHeaderField()和其他要求開啟連線的方法，如果未開啟，會自動呼叫connect()
案例：用URLConnection下載一個WEB頁面：

public class SourceViewer2 {
public static void main(String[] args) {
    if (args.length > 0) {
        try {
            URL u = new URL(args[0]);
            URLConnection uc = u.openConnection();
            try (InputStream raw = uc.getInputStream()) {
                InputStream buffer = new BufferedInputStream(raw);
                Reader reader = new InputStreamReader(buffer);
                int c;
                while ((c = reader.read()) != -1) {
                    System.out.println((char) c);
                }
            }
        } catch (MalformedURLException e) {
            e.printStackTrace();
        } catch (IOException e) {
            e.printStackTrace();
        }
    }
}

}

URLConnection和URL的區別

URLConnection 提供了對HTTP首部的訪問
可以配置伺服器的請求引數
可以向伺服器寫入資料

讀取首部

public String getContentType()

返回響應主體的MIME型別（可能包括編碼型別，因此可以按指定的編碼方式解碼）

public int getContentLength()

內容有多少位元組，如果沒有該首部就返回-1，如果位元組數超出int範圍應該使用：

public long getContentLengthLong();//java7

示例：下載二進位制檔案

public class BinarySaver {
public static void main(String[] args) {
    for (int i = 0; i < args.length; i++) {
        try {
            URL root = new URL(args[i]);
            saveBinaryFile(root);
        } catch (MalformedURLException e) {
            e.printStackTrace();
        } catch (IOException e) {
            e.printStackTrace();
        }
    }
}
private static void saveBinaryFile(URL u) throws IOException {
    URLConnection uc = u.openConnection();
    String contentType = uc.getContentType();
    int contentLength = uc.getContentLength();
    if (contentType.startsWith("text/") || contentLength == -1) {
        throw new IOException("This is not a binary file.");
    }
    try (InputStream rwa = uc.getInputStream()) {
        InputStream in = new BufferedInputStream(rwa);
        byte[] data = new byte[contentLength];
        int offset = 0;
        while (offset < contentLength) {
            int bytesRead = in.read(data, offset, data.length - offset);
            if (bytesRead ==-1) break;
            offset += bytesRead;
        }
        if (offset != contentLength) {
            throw new IOException("not read all");
        }
        String filename = u.getFile();
        filename = filename.substring(filename.lastIndexOf("/") + 1);
        try (FileOutputStream fout = new FileOutputStream(filename)) {
            fout.write(data);
            fout.flush();
        }
    }
}

獲取內容編碼方式（位元組如何編碼成位元組）（不同於字元編碼）：

public String getContentEncoding()

沒有編碼 返回null

獲取傳送時間：

public long getDate();//沒有就返回0
Date document = new Date(uc.getDate())；

過期日期：

public long getExpiration()

最後修改日期：

public long getLastModified

獲取任意首部欄位

public String getHeaderField(String name);//不區分大小寫
public String getHeaderFieldKey(int n);//返回第n個首部欄位
public String getHeaderField(int n);//返回第n個欄位的值
public long getHeaderFieldDate(String name, long default);//將值轉換為long
public long getHeaderFieldInt(String name, int default);//轉化為int

快取

一般情況下使用get通過HTTP訪問的頁面可以快取，也應當快取，相關的HTTP首部：

Expires首部：指定快取的時間
Cache-control首部（和上面同出現，會覆蓋它）：
    max-aget=[seconds]:
    s-maxage=[seconds]: 到過期之前的秒數
    public:可以快取一個經過認證的響應
    private: 僅單個使用者快取可以儲存響應
    no-cache: 客戶端每次都要用Etag或Last-modified首部重新驗證響應的狀態
    no-store:不管怎麼樣都不快取
Last_modified:最後一次修改的日期
Etag:驗證本地快取的標誌，標誌不同時，才執行get請求

java的web快取

預設情況下java並不完成快取，如果要快取需要：

ResponseCache（處理後面兩個的類），CacheRequest，CacheResponse

一旦安裝了快取，只要系統嘗試載入一個URL，它首先會在這個快取中找。
ResponseCache的兩個方法：

public abstract CacheResponse get(...);//獲取快取資料和首部（其中會用到CacheRequest）
public abstract CacheRequest put(...);//獲取快取，通過一個流

java要求一次只能有一個URL快取。要安裝或者改變快取，需要使用：

public static ResponseCace.setDefault()
public static void setDefault(ResponseCache responseCache)

配置連線：

URLConnection主要有7個保護的例項欄位，定了傳送的請求

URL url;
boolean DoInput = true;
boolean doOutput = false;
allowUserInteraction = defaultAllowUserInteraction;
boolean useCaches = defaultUserCaches;
long ifModifiedSince = 0;
boolean connected = false;

這些值都是通過get和set方法獲取和改變（後兩個沒有get和set，更改在連線之前）

配置請求的首部

URLConnection會有一些預設的首部，新增首部：

public void setRequestProperty(String name, String value);

增加屬性：

public void addRequestProperty(String name, String value);

獲取屬性：

public String getRequestProperty(String name);
public Map<String,List<String>> getRequestProperties();

向伺服器寫資料

URLConnection預設不輸出，因此請求輸出之前必須呼叫setDoOutput(true)，這時請求方法變成POST。GET僅限於安全的操作，如搜尋請求或頁面導航，不能用於建立或修改資源的不安全操作。輸出通過流輸出：

public OutputStream getOutputStream();

案例：提交表單資料
編碼轉換的類：

public class QueryString {
    private StringBuilder query = new StringBuilder();

   public QueryString() {
   }
   public synchronized void add(String name, String value) {
       query.append("&");
       encode(name, value);
   }
   private void encode(String name, String value) {
       try {
           query.append(URLEncoder.encode(name, "UTF-8"));
           query.append("=");
           query.append(URLEncoder.encode(value, "UTF-8"));
       } catch (UnsupportedEncodingException e) {
           e.printStackTrace();
       }
   }
   public synchronized String getQuery() {
       return query.toString();
   }
   @Override
   public String toString() {
       return getQuery();
   }
}

主類：

public class FormPoster {
    private URL url;
    private QueryString query = new QueryString();

    public FormPoster(URL url) {
        if (!url.getProtocol().toLowerCase().startsWith("http")) {
            throw new IllegalArgumentException("not http URLs");
        }
        this.url = url;
    }

    public void add(String name, String value) {
        query.add(name, value);
    }

    public URL getURL() {
        return this.url;
    }
    public InputStream post() throws IOException {
        URLConnection uc = url.openConnection();
        uc.setDoOutput(true);
        try (OutputStreamWriter out = new OutputStreamWriter(uc.getOutputStream(),"UTF-8")) {
            out.write(query.toString());
            out.write("\r\n");
            out.flush();
        }
        return uc.getInputStream();
    }

    public static void main(String[] args) {
        URL url;
        if (args.length > 0) {
            try {
                url = new URL(args[0]);
            } catch (MalformedURLException e) {
                e.printStackTrace();
                return;
            }
        } else {
            try {
                url = new URL("http://www.xx.com/xx.html");
            } catch (MalformedURLException e) {
                e.printStackTrace();
                return;
            }
        }
        FormPoster poster = new FormPoster(url);
        poster.add("name", "xx");
        poster.add("email", "xx");
        try (InputStream in = poster.post()) {
            Reader r = new InputStreamReader(in);
            int c ;
            while ((c = r.read()) != -1) {
                System.out.println((char)c);
            }
        } catch (IOException e) {
            e.printStackTrace();
        }
    }
}

URLConnection的安全性考慮

public Permission getPermission() throws IOException

返回一個Permission來測試是否能建立URLConnection連線

猜測MIME型別

僅是猜測

public static String guessContentTypeFromName(String name);
public static String guessContentTypeFromStream(InputStream in);

HttpURLConnection

該類是URLConnection的抽象子類。可以改變請求方法（預設是GET）：

public void setRequestMethos(String method) throws ProtocolException

引數選項：GET POST HEAD PUT DELETE OPTIONS TRACE

獲取響應嗎和響應內容：

public int getResponseCode() throws IOException
public String getResponseMessage() throws IOException

得到錯誤訊息：

public InputStream getErrorStream()

相關推薦

java網路程式設計-HTTP和URLConnection

HTTP和URLConnection 標籤（空格分隔）： java網路程式設計 HTTP get請求是一個空行結束，也就是\r\n\r\n CookieManager 啟用cookie： CookieManager manager

Java網路程式設計-URI和URL

前提 前面的一篇文章《Java中的Internet查詢》分析完了如何通過IP地址或者主機名確定主機在因特網中的地址。任意給定主機上可能會有任意多個資源，這些資源需要有識別符號方便主機之間訪問對方的資源，因此這篇文章深入分析一下URL和URI。 URI URI全稱是Uniform Resource Identi

Java網路程式設計-HTTP協議

HTTP協議的定義 這篇文章暫時不研究HTTP底層的TCP/IP的握手和揮手過程，只從表面的互動流程分析HTTP協議。 HTTP英文全稱是Hypertext Transfer Protpcol，也就是超文字傳輸協議。HTTP是一個標準，定義了Web客戶端如何與伺服器對話以及資料如何從伺服器傳回到客戶端。在日常

網路程式設計http 和https

超文字傳輸協議HTTP協議被用於在Web瀏覽器和網站伺服器之間傳遞資訊，HTTP協議以明文方式傳送內容，不提供任何方式的資料加密，如果攻擊者截取了Web瀏覽器和網站伺服器之間的傳輸報文，就可以直接讀懂其中的資訊，因此，HTTP協議不適合傳輸一些敏感資訊，比如：信

【Java8網路程式設計】第3章. HTTP和URLConnection類

1.HTTP基本概念 HTTP（HyperText Transport Protocol）是超文字傳輸協議的縮寫，它用於傳送WWW方式的資料。HTTP協議採用了請求/響應模型。客戶端向伺服器傳送一個請求，請求頭包含請求的方法、URL、協議版本、以及包含請求修飾

java網路程式設計：URLConnection 和HttpURLConnection

         URLConnection和HttpURLConnection使用的都是Java.net中的類，屬於標準的java介面。         HttpURLConnection繼承自URLConnection,差別在與HttpURLConnection僅僅針對

java 網路程式設計——TCP 的三次握手和四次揮手

文章目錄 TCP報頭 三次握手 未連線佇列 四次揮手 狀態詳解 在TCP/IP協議中,TCP協議提供可靠的連線服務,採用三次握手建立一個連線. TCP報頭 埠號：用來標識

JAVA入門到精通-網路程式設計補充和QQ案例

------------------------------------------------------ 補充講解: 如何在網路間傳遞物件？ [MyServer.java]伺服器原始碼 package com.test.server; import java.io.Obje

java網路程式設計（2）URLDecoder和URLEncoder

一下為程式碼示例，具體的講解穿插在程式碼中 import java.net.URLDecoder; import java.net.URLEncoder; public class URLDecoderTest { public static void mai

Java網路程式設計（2）：TCP和UDP

1、多執行緒“服務端-客戶端”   TCP客戶端使用Socket來連線伺服器和與伺服器通訊。以下為在主執行緒中將使用者輸入傳送給服務端，在建立的執行緒中將服務端發回的資料輸出來： import java.net.*; import java.io.*; class Cl

【Java網路程式設計】：JDK API實現OIO和NIO

前言 網路程式設計是Java的一大難點，JDK自帶的api可以實現網路程式設計。 我們將從一個應用程式開始我們對傳輸的學習，這個應用程式只簡單地接受連線，然後向客戶端寫“Hi!”，然後關閉連線。 1. OIO實現 應用程式的阻塞（OIO）版程式碼如下： package

Java網路程式設計之URL和URI

URL和URI URL可以唯一地標識一個資源在Internet上的位置。URL是最常見的URI URI URI的結構： 模式：模式特定部分 常見的模式有： data file ftp http mailto magnet teln

【Java網路程式設計】：Netty實現OIO和NIO

承接上文：https://blog.csdn.net/hxcaifly/article/details/85274664 前言 單純地使用Java JDK來實現網路NIO是一件開發成本非常高的事情。然而，Netty 為它所有的傳輸實現提供了一個通用API，這使得這種

JAVA 網路程式設計(7) Netty 處理Http協議 示例

maven中使用netty的版本為： <dependency> <groupId>io.netty</groupId> <artifactId>netty-all</artifactId> &

Java網路程式設計之URLEncode和URLDecode工具類

import java.io.UnsupportedEncodingException; import java.net.URLDecoder; import java.net.URLEncoder; public class EncodeTest {

Java網路程式設計——InetAddress類和URL類

一、InetAddress類與URL類 Java中用InetAddress類表示網際網路協議（IP）地址，用URL類表示一個統一資源定位符，它是指向網際網路上某一資源的“指標”。IP 地址是 IP 使

Java網路程式設計(一) TCP/IP，http，socket，長連線，短連線

TCP/IP  TCP/IP是個協議組，可分為三個層次：網路層、傳輸層和應用層。  在網路層有IP協議、ICMP協議、ARP協議、RARP協議和BOOTP協議。  在傳輸層中有TCP協議與UDP協議。  在應用層有:TCP包括FTP、HTTP、TELNET、SMTP等協議

Java網路程式設計之Netty拆包和黏包-yellowcong

Netty中，解決拆包和黏包中，解決方式有三種 1、在每個包尾部，定義分隔符，通過回車符號，或者其他符號來解決 2、通過定義每個包的大小，如果包不夠就空格填充 3、自定義協議的方式，將訊息分為訊息頭和訊息體，在訊息頭中表示出訊息的總長度，

Java網路程式設計——第六章 Http協議

Http請求基本形式：      1、請求頭部：方法 資源路徑 協議與版本      2、請求首部：Http元資料，鍵值對結構，必須是ASCII字元，關鍵字不區分大小，值可以區分大小，也可以不區分，      3、空行  /r/n/r/n      4、訊息體 Http響應

Java網路程式設計和NIO詳解開篇：Java網路程式設計基礎

老曹眼中的網路程式設計基礎 轉自：https://mp.weixin.qq.com/s/XXMz5uAFSsPdg38bth2jAA 我們是幸運的，因為我們擁有網路。網路是一個神奇的東西，它改變了你和我的生活方式，改變了整個世界。 然而，網路的無標度和