Как использовать java.net.URLConnection для запуска и обработки HTTP-запросов?

Использование java.net.URLConnectionспрашивают о довольно часто здесь, и учебник Oracle является слишком кратким об этом.

Этот учебник в основном только показывает, как запустить запрос GET и прочитать ответ. Он нигде не объясняет, как его использовать, среди прочего, для выполнения запроса POST, установки заголовков запросов, чтения заголовков ответов, работы с файлами cookie, отправки формы HTML, загрузки файла и т. Д.

Итак, как я могу использовать java.net.URLConnectionдля запуска и обработки «продвинутых» HTTP-запросов?

^{Сначала откажитесь от ответственности: все опубликованные фрагменты кода являются основными примерами. Вы должны будете справиться с тривиальными IOExceptionи RuntimeExceptionподобными NullPointerException, ArrayIndexOutOfBoundsExceptionи поддерживает себя.}

Подготовка

Сначала нам нужно знать хотя бы URL и кодировку. Параметры являются необязательными и зависят от функциональных требований.

String url = "http://example.com";
String charset = "UTF-8";  // Or in Java 7 and later, use the constant: java.nio.charset.StandardCharsets.UTF_8.name()
String param1 = "value1";
String param2 = "value2";
// ...

String query = String.format("param1=%s&param2=%s", 
     URLEncoder.encode(param1, charset), 
     URLEncoder.encode(param2, charset));

Параметры запроса должны быть в name=valueформате и должны быть связаны &. Обычно вы также URL-кодируете параметры запроса с использованием указанной кодировки URLEncoder#encode().

^{Это String#format()просто для удобства. Я предпочитаю это, когда мне понадобится оператор конкатенации строк +более двух раз.}

Запуск HTTP GET- запроса с (опционально) параметрами запроса

Это тривиальная задача. Это метод запроса по умолчанию.

URLConnection connection = new URL(url + "?" + query).openConnection();
connection.setRequestProperty("Accept-Charset", charset);
InputStream response = connection.getInputStream();
// ...

Любая строка запроса должна быть присоединена к URL с помощью ?. Accept-CharsetЗаголовок может намекнуть на то , что сервере , кодирующие параметры находятся. Если вы не отправите любую строку запроса, то вы можете оставить Accept-Charsetзаголовок прочь. Если вам не нужно устанавливать какие-либо заголовки, вы можете даже использовать URL#openStream()метод ярлыков.

InputStream response = new URL(url).openStream();
// ...

В любом случае, если другая сторона - это HttpServlet, то doGet()будет вызван ее метод и параметры будут доступны HttpServletRequest#getParameter().

В целях тестирования вы можете напечатать тело ответа на стандартный вывод, как показано ниже:

try (Scanner scanner = new Scanner(response)) {
    String responseBody = scanner.useDelimiter("\\A").next();
    System.out.println(responseBody);
}

Запуск HTTP POST- запроса с параметрами запроса

Установка URLConnection#setDoOutput()для trueнеявно устанавливает метод запроса к POST. Стандартный HTTP POST, как и веб-формы, имеет тип, в application/x-www-form-urlencodedкотором строка запроса записывается в тело запроса.

URLConnection connection = new URL(url).openConnection();
connection.setDoOutput(true); // Triggers POST.
connection.setRequestProperty("Accept-Charset", charset);
connection.setRequestProperty("Content-Type", "application/x-www-form-urlencoded;charset=" + charset);

try (OutputStream output = connection.getOutputStream()) {
    output.write(query.getBytes(charset));
}

InputStream response = connection.getInputStream();
// ...

Примечание: всякий раз, когда вы хотите отправить HTML-форму программно, не забывайте вводить name=valueпары любых <input type="hidden">элементов в строку запроса и, конечно, также name=valueпару <input type="submit">элементов, которые вы хотите «нажать» программно (потому что это обычно используется на стороне сервера, чтобы различать, была ли нажата кнопка, и если да, то какая.

Вы также можете привести полученный URLConnectionв HttpURLConnectionи использовать его HttpURLConnection#setRequestMethod()вместо. Но если вы пытаетесь использовать соединение для вывода, вам все равно нужно установить URLConnection#setDoOutput()на true.

HttpURLConnection httpConnection = (HttpURLConnection) new URL(url).openConnection();
httpConnection.setRequestMethod("POST");
// ...

В любом случае, если другая сторона - это HttpServlet, то doPost()будет вызван ее метод и параметры будут доступны HttpServletRequest#getParameter().

На самом деле запускает HTTP-запрос

Вы можете явно запустить HTTP-запрос URLConnection#connect(), но запрос будет автоматически запущен по требованию, когда вы захотите получить какую-либо информацию об HTTP-ответе, такую ​​как использование тела ответа URLConnection#getInputStream()и так далее. Приведенные выше примеры делают именно это, поэтому connect()вызов на самом деле является излишним.

Сбор информации ответа HTTP

1. Статус ответа HTTP :

   Тебе нужен HttpURLConnectionздесь. Примените это сначала, если необходимо.

   int status = httpConnection.getResponseCode();

2. Заголовки ответа HTTP :

   for (Entry<String, List<String>> header : connection.getHeaderFields().entrySet()) {
       System.out.println(header.getKey() + "=" + header.getValue());
   }

3. Кодировка ответа HTTP :

   Если параметр Content-Typeсодержит charsetпараметр, то тело ответа, скорее всего, основано на тексте, и мы хотели бы обработать тело ответа с указанной на стороне сервера кодировкой символов.

   String contentType = connection.getHeaderField("Content-Type");
   String charset = null;
   
   for (String param : contentType.replace(" ", "").split(";")) {
       if (param.startsWith("charset=")) {
           charset = param.split("=", 2)[1];
           break;
       }
   }
   
   if (charset != null) {
       try (BufferedReader reader = new BufferedReader(new InputStreamReader(response, charset))) {
           for (String line; (line = reader.readLine()) != null;) {
               // ... System.out.println(line) ?
           }
       }
   } else {
       // It's likely binary content, use InputStream/OutputStream.
   }

Ведение сессии

Сеанс на стороне сервера обычно поддерживается файлом cookie. Некоторые веб-формы требуют, чтобы вы вошли в систему и / или отслеживались сеансом. Вы можете использовать CookieHandlerAPI для поддержки файлов cookie. Вы должны подготовить CookieManagerс CookiePolicyиз ACCEPT_ALLперед отправкой всех запросов HTTP.

// First set the default cookie manager.
CookieHandler.setDefault(new CookieManager(null, CookiePolicy.ACCEPT_ALL));

// All the following subsequent URLConnections will use the same cookie manager.
URLConnection connection = new URL(url).openConnection();
// ...

connection = new URL(url).openConnection();
// ...

connection = new URL(url).openConnection();
// ...

Обратите внимание, что это, как известно, не всегда работает должным образом при любых обстоятельствах. Если у вас ничего не получится, лучше всего вручную собрать и установить заголовки файлов cookie. В основном вам нужно получить все Set-Cookieзаголовки из ответа входа в систему или первого GETзапроса и затем передать его через последующие запросы.

// Gather all cookies on the first request.
URLConnection connection = new URL(url).openConnection();
List<String> cookies = connection.getHeaderFields().get("Set-Cookie");
// ...

// Then use the same cookies on all subsequent requests.
connection = new URL(url).openConnection();
for (String cookie : cookies) {
    connection.addRequestProperty("Cookie", cookie.split(";", 2)[0]);
}
// ...

Он split(";", 2)[0]предназначен для того, чтобы избавиться от атрибутов cookie, которые не имеют отношения к серверной части, например expires, pathи т. Д. В качестве альтернативы вы также можете использовать cookie.substring(0, cookie.indexOf(';'))вместо split().

Потоковый режим

По HttpURLConnectionумолчанию завещание буферизует все тело запроса перед его отправкой, независимо от того, установили ли вы фиксированную длину контента самостоятельно connection.setRequestProperty("Content-Length", contentLength);. Это может вызывать OutOfMemoryExceptions всякий раз, когда вы одновременно отправляете большие запросы POST (например, загружаете файлы). Чтобы избежать этого, вы хотели бы установить HttpURLConnection#setFixedLengthStreamingMode().

httpConnection.setFixedLengthStreamingMode(contentLength);

Но если длина контента на самом деле не известна заранее, то вы можете использовать режим потоковой передачи по частям, установив HttpURLConnection#setChunkedStreamingMode()соответствующий параметр. Это установит Transfer-Encodingзаголовок HTTP, к chunkedкоторому принудительно будет отправлено тело запроса в виде фрагментов. Приведенный ниже пример отправит тело кусками по 1 КБ.

httpConnection.setChunkedStreamingMode(1024);

User-Agent

Может случиться, что запрос возвращает неожиданный ответ, в то время как он отлично работает с реальным веб-браузером . Серверная сторона, вероятно, блокирует запросы на основе User-Agentзаголовка запроса. По URLConnectionумолчанию будет установлено, что Java/1.6.0_19последняя часть, очевидно, является версией JRE. Вы можете переопределить это следующим образом:

connection.setRequestProperty("User-Agent", "Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2228.0 Safari/537.36"); // Do as if you're using Chrome 41 on Windows 7.

Используйте строку User-Agent из недавнего браузера .

Обработка ошибок

Если код ответа HTTP - 4nn(Ошибка клиента) или 5nn(Ошибка сервера), вы можете прочитать, HttpURLConnection#getErrorStream()чтобы проверить, отправил ли сервер какую-либо полезную информацию об ошибке.

InputStream error = ((HttpURLConnection) connection).getErrorStream();

Если код ответа HTTP равен -1, значит что-то пошло не так с обработкой соединения и ответа. HttpURLConnectionРеализация в старых JREs несколько багги с сохранением соединения в живых. Вы можете отключить его, установив http.keepAliveсистемное свойство в false. Вы можете сделать это программно в начале вашего приложения:

System.setProperty("http.keepAlive", "false");

Загрузка файлов

Обычно вы используете multipart/form-dataкодирование для смешанного содержимого POST (двоичные и символьные данные). Кодирование более подробно описано в RFC2388 .

String param = "value";
File textFile = new File("/path/to/file.txt");
File binaryFile = new File("/path/to/file.bin");
String boundary = Long.toHexString(System.currentTimeMillis()); // Just generate some unique random value.
String CRLF = "\r\n"; // Line separator required by multipart/form-data.
URLConnection connection = new URL(url).openConnection();
connection.setDoOutput(true);
connection.setRequestProperty("Content-Type", "multipart/form-data; boundary=" + boundary);

try (
    OutputStream output = connection.getOutputStream();
    PrintWriter writer = new PrintWriter(new OutputStreamWriter(output, charset), true);
) {
    // Send normal param.
    writer.append("--" + boundary).append(CRLF);
    writer.append("Content-Disposition: form-data; name=\"param\"").append(CRLF);
    writer.append("Content-Type: text/plain; charset=" + charset).append(CRLF);
    writer.append(CRLF).append(param).append(CRLF).flush();

    // Send text file.
    writer.append("--" + boundary).append(CRLF);
    writer.append("Content-Disposition: form-data; name=\"textFile\"; filename=\"" + textFile.getName() + "\"").append(CRLF);
    writer.append("Content-Type: text/plain; charset=" + charset).append(CRLF); // Text file itself must be saved in this charset!
    writer.append(CRLF).flush();
    Files.copy(textFile.toPath(), output);
    output.flush(); // Important before continuing with writer!
    writer.append(CRLF).flush(); // CRLF is important! It indicates end of boundary.

    // Send binary file.
    writer.append("--" + boundary).append(CRLF);
    writer.append("Content-Disposition: form-data; name=\"binaryFile\"; filename=\"" + binaryFile.getName() + "\"").append(CRLF);
    writer.append("Content-Type: " + URLConnection.guessContentTypeFromName(binaryFile.getName())).append(CRLF);
    writer.append("Content-Transfer-Encoding: binary").append(CRLF);
    writer.append(CRLF).flush();
    Files.copy(binaryFile.toPath(), output);
    output.flush(); // Important before continuing with writer!
    writer.append(CRLF).flush(); // CRLF is important! It indicates end of boundary.

    // End of multipart/form-data.
    writer.append("--" + boundary + "--").append(CRLF).flush();
}

Если другая сторона - это HttpServlet, то doPost()будет вызван ее метод, и части будут доступны через HttpServletRequest#getPart()(обратите внимание, таким образом, нет getParameter() и так далее!). Однако этот getPart()метод относительно новый, он введен в Servlet 3.0 (Glassfish 3, Tomcat 7 и т. Д.). До Servlet 3.0 ваш лучший выбор - использовать Apache Commons FileUpload для анализа multipart/form-dataзапроса. Также смотрите этот ответ для примеров подходов FileUpload и Servelt 3.0.

Работа с ненадежными или неправильно настроенными HTTPS-сайтами

Иногда вам нужно подключить HTTPS URL, возможно, потому что вы пишете веб-скребок. В этом случае вы можете столкнуться с javax.net.ssl.SSLException: Not trusted server certificateпроблемой на некоторых сайтах HTTPS, которые не поддерживают свои сертификаты SSL в актуальном состоянии, java.security.cert.CertificateException: No subject alternative DNS name matching [hostname] foundили javax.net.ssl.SSLProtocolException: handshake alert: unrecognized_nameна некоторых неправильно настроенных сайтах HTTPS.

Следующий одноразовый staticинициализатор в вашем классе веб-скребка должен сделать HttpsURLConnectionболее снисходительным в отношении этих HTTPS-сайтов и, таким образом, больше не генерировать эти исключения.

static {
    TrustManager[] trustAllCertificates = new TrustManager[] {
        new X509TrustManager() {
            @Override
            public X509Certificate[] getAcceptedIssuers() {
                return null; // Not relevant.
            }
            @Override
            public void checkClientTrusted(X509Certificate[] certs, String authType) {
                // Do nothing. Just allow them all.
            }
            @Override
            public void checkServerTrusted(X509Certificate[] certs, String authType) {
                // Do nothing. Just allow them all.
            }
        }
    };

    HostnameVerifier trustAllHostnames = new HostnameVerifier() {
        @Override
        public boolean verify(String hostname, SSLSession session) {
            return true; // Just allow them all.
        }
    };

    try {
        System.setProperty("jsse.enableSNIExtension", "false");
        SSLContext sc = SSLContext.getInstance("SSL");
        sc.init(null, trustAllCertificates, new SecureRandom());
        HttpsURLConnection.setDefaultSSLSocketFactory(sc.getSocketFactory());
        HttpsURLConnection.setDefaultHostnameVerifier(trustAllHostnames);
    }
    catch (GeneralSecurityException e) {
        throw new ExceptionInInitializerError(e);
    }
}

Последние слова

Apache HttpComponents HttpClient является гораздо более удобным в этом все :)

• HttpClient Tutorial
• Примеры HttpClient

Разбор и извлечение HTML

Если все, что вам нужно, это анализ и извлечение данных из HTML, тогда лучше использовать HTML-парсер, такой как Jsoup

• Каковы плюсы / минусы ведущих HTML-парсеров в Java
• Как отсканировать и извлечь веб-страницу в Java

При работе с HTTP почти всегда более полезно ссылаться HttpURLConnectionна базовый класс, а не на базовый класс URLConnection(так URLConnectionкак это абстрактный класс, когда вы запрашиваете URLConnection.openConnection()URL-адрес HTTP, это то, что вы получите в любом случае).

Тогда вы можете вместо того, URLConnection#setDoOutput(true)чтобы неявно устанавливать метод запроса на POST, вместо этого делать то, httpURLConnection.setRequestMethod("POST")что некоторым может показаться более естественным (и которое также позволяет вам указать другие методы запроса, такие как PUT , DELETE , ...).

Он также предоставляет полезные константы HTTP, так что вы можете сделать:

int responseCode = httpURLConnection.getResponseCode();

if (responseCode == HttpURLConnection.HTTP_OK) {

Вдохновленный этим и другими вопросами о SO, я создал минимальный базовый http-клиент с открытым исходным кодом, который воплощает большинство методов, найденных здесь.

google-http-java-client также является отличным ресурсом с открытым исходным кодом.

Я предлагаю вам взглянуть на код в kevinsawicki / http-request , в основном его оболочка HttpUrlConnectionобеспечивает гораздо более простой API на тот случай, если вы просто захотите сделать запросы прямо сейчас или вы можете взглянуть на источники ( это не слишком большой), чтобы посмотреть, как обрабатываются соединения.

Пример: сделать GETзапрос с типом контента application/jsonи некоторыми параметрами запроса:

// GET http://google.com?q=baseball%20gloves&size=100
String response = HttpRequest.get("http://google.com", true, "q", "baseball gloves", "size", 100)
        .accept("application/json")
        .body();
System.out.println("Response was: " + response);

Есть 2 варианта, которые вы можете использовать с HTTP URL Hits: GET / POST

ПОЛУЧИТЬ запрос: -

HttpURLConnection.setFollowRedirects(true); // defaults to true

String url = "https://name_of_the_url";
URL request_url = new URL(url);
HttpURLConnection http_conn = (HttpURLConnection)request_url.openConnection();
http_conn.setConnectTimeout(100000);
http_conn.setReadTimeout(100000);
http_conn.setInstanceFollowRedirects(true);
System.out.println(String.valueOf(http_conn.getResponseCode()));

POST запрос: -

HttpURLConnection.setFollowRedirects(true); // defaults to true

String url = "https://name_of_the_url"
URL request_url = new URL(url);
HttpURLConnection http_conn = (HttpURLConnection)request_url.openConnection();
http_conn.setConnectTimeout(100000);
http_conn.setReadTimeout(100000);
http_conn.setInstanceFollowRedirects(true);
http_conn.setDoOutput(true);
PrintWriter out = new PrintWriter(http_conn.getOutputStream());
if (urlparameter != null) {
   out.println(urlparameter);
}
out.close();
out = null;
System.out.println(String.valueOf(http_conn.getResponseCode()));

Я также был очень вдохновлен этим ответом.

Я часто нахожусь в проектах, где мне нужно сделать какой-то HTTP, и я, возможно, не захочу вносить много сторонних зависимостей (которые включают других и так далее, и так далее, и т. Д.)

Я начал писать свои собственные утилиты, основанные на некоторых из этого разговора (а не где-нибудь):

package org.boon.utils;


import java.io.IOException;
import java.io.InputStream;
import java.net.HttpURLConnection;
import java.net.URL;
import java.net.URLConnection;
import java.util.Map;

import static org.boon.utils.IO.read;

public class HTTP {

Тогда есть только куча или статические методы.

public static String get(
        final String url) {

    Exceptions.tryIt(() -> {
        URLConnection connection;
        connection = doGet(url, null, null, null);
        return extractResponseString(connection);
    });
    return null;
}

public static String getWithHeaders(
        final String url,
        final Map<String, ? extends Object> headers) {
    URLConnection connection;
    try {
        connection = doGet(url, headers, null, null);
        return extractResponseString(connection);
    } catch (Exception ex) {
        Exceptions.handle(ex);
        return null;
    }
}

public static String getWithContentType(
        final String url,
        final Map<String, ? extends Object> headers,
        String contentType) {
    URLConnection connection;
    try {
        connection = doGet(url, headers, contentType, null);
        return extractResponseString(connection);
    } catch (Exception ex) {
        Exceptions.handle(ex);
        return null;
    }
}
public static String getWithCharSet(
        final String url,
        final Map<String, ? extends Object> headers,
        String contentType,
        String charSet) {
    URLConnection connection;
    try {
        connection = doGet(url, headers, contentType, charSet);
        return extractResponseString(connection);
    } catch (Exception ex) {
        Exceptions.handle(ex);
        return null;
    }
}

Тогда пост ...

public static String postBody(
        final String url,
        final String body) {
    URLConnection connection;
    try {
        connection = doPost(url, null, "text/plain", null, body);
        return extractResponseString(connection);
    } catch (Exception ex) {
        Exceptions.handle(ex);
        return null;
    }
}

public static String postBodyWithHeaders(
        final String url,
        final Map<String, ? extends Object> headers,
        final String body) {
    URLConnection connection;
    try {
        connection = doPost(url, headers, "text/plain", null, body);
        return extractResponseString(connection);
    } catch (Exception ex) {
        Exceptions.handle(ex);
        return null;
    }
}



public static String postBodyWithContentType(
        final String url,
        final Map<String, ? extends Object> headers,
        final String contentType,
        final String body) {

    URLConnection connection;
    try {
        connection = doPost(url, headers, contentType, null, body);


        return extractResponseString(connection);


    } catch (Exception ex) {
        Exceptions.handle(ex);
        return null;
    }


}


public static String postBodyWithCharset(
        final String url,
        final Map<String, ? extends Object> headers,
        final String contentType,
        final String charSet,
        final String body) {

    URLConnection connection;
    try {
        connection = doPost(url, headers, contentType, charSet, body);


        return extractResponseString(connection);


    } catch (Exception ex) {
        Exceptions.handle(ex);
        return null;
    }


}

private static URLConnection doPost(String url, Map<String, ? extends Object> headers,
                                    String contentType, String charset, String body
                                    ) throws IOException {
    URLConnection connection;/* Handle output. */
    connection = new URL(url).openConnection();
    connection.setDoOutput(true);
    manageContentTypeHeaders(contentType, charset, connection);

    manageHeaders(headers, connection);


    IO.write(connection.getOutputStream(), body, IO.CHARSET);
    return connection;
}

private static void manageHeaders(Map<String, ? extends Object> headers, URLConnection connection) {
    if (headers != null) {
        for (Map.Entry<String, ? extends Object> entry : headers.entrySet()) {
            connection.setRequestProperty(entry.getKey(), entry.getValue().toString());
        }
    }
}

private static void manageContentTypeHeaders(String contentType, String charset, URLConnection connection) {
    connection.setRequestProperty("Accept-Charset", charset == null ? IO.CHARSET : charset);
    if (contentType!=null && !contentType.isEmpty()) {
        connection.setRequestProperty("Content-Type", contentType);
    }
}

private static URLConnection doGet(String url, Map<String, ? extends Object> headers,
                                    String contentType, String charset) throws IOException {
    URLConnection connection;/* Handle output. */
    connection = new URL(url).openConnection();
    manageContentTypeHeaders(contentType, charset, connection);

    manageHeaders(headers, connection);

    return connection;
}

private static String extractResponseString(URLConnection connection) throws IOException {
/* Handle input. */
    HttpURLConnection http = (HttpURLConnection)connection;
    int status = http.getResponseCode();
    String charset = getCharset(connection.getHeaderField("Content-Type"));

    if (status==200) {
        return readResponseBody(http, charset);
    } else {
        return readErrorResponseBody(http, status, charset);
    }
}

private static String readErrorResponseBody(HttpURLConnection http, int status, String charset) {
    InputStream errorStream = http.getErrorStream();
    if ( errorStream!=null ) {
        String error = charset== null ? read( errorStream ) :
            read( errorStream, charset );
        throw new RuntimeException("STATUS CODE =" + status + "\n\n" + error);
    } else {
        throw new RuntimeException("STATUS CODE =" + status);
    }
}

private static String readResponseBody(HttpURLConnection http, String charset) throws IOException {
    if (charset != null) {
        return read(http.getInputStream(), charset);
    } else {
        return read(http.getInputStream());
    }
}

private static String getCharset(String contentType) {
    if (contentType==null)  {
        return null;
    }
    String charset = null;
    for (String param : contentType.replace(" ", "").split(";")) {
        if (param.startsWith("charset=")) {
            charset = param.split("=", 2)[1];
            break;
        }
    }
    charset = charset == null ?  IO.CHARSET : charset;

    return charset;
}

Ну вы поняли ....

Вот тесты:

static class MyHandler implements HttpHandler {
    public void handle(HttpExchange t) throws IOException {

        InputStream requestBody = t.getRequestBody();
        String body = IO.read(requestBody);
        Headers requestHeaders = t.getRequestHeaders();
        body = body + "\n" + copy(requestHeaders).toString();
        t.sendResponseHeaders(200, body.length());
        OutputStream os = t.getResponseBody();
        os.write(body.getBytes());
        os.close();
    }
}


@Test
public void testHappy() throws Exception {

    HttpServer server = HttpServer.create(new InetSocketAddress(9212), 0);
    server.createContext("/test", new MyHandler());
    server.setExecutor(null); // creates a default executor
    server.start();

    Thread.sleep(10);


    Map<String,String> headers = map("foo", "bar", "fun", "sun");

    String response = HTTP.postBodyWithContentType("http://localhost:9212/test", headers, "text/plain", "hi mom");

    System.out.println(response);

    assertTrue(response.contains("hi mom"));
    assertTrue(response.contains("Fun=[sun], Foo=[bar]"));


    response = HTTP.postBodyWithCharset("http://localhost:9212/test", headers, "text/plain", "UTF-8", "hi mom");

    System.out.println(response);

    assertTrue(response.contains("hi mom"));
    assertTrue(response.contains("Fun=[sun], Foo=[bar]"));

    response = HTTP.postBodyWithHeaders("http://localhost:9212/test", headers, "hi mom");

    System.out.println(response);

    assertTrue(response.contains("hi mom"));
    assertTrue(response.contains("Fun=[sun], Foo=[bar]"));


    response = HTTP.get("http://localhost:9212/test");

    System.out.println(response);


    response = HTTP.getWithHeaders("http://localhost:9212/test", headers);

    System.out.println(response);

    assertTrue(response.contains("Fun=[sun], Foo=[bar]"));



    response = HTTP.getWithContentType("http://localhost:9212/test", headers, "text/plain");

    System.out.println(response);

    assertTrue(response.contains("Fun=[sun], Foo=[bar]"));



    response = HTTP.getWithCharSet("http://localhost:9212/test", headers, "text/plain", "UTF-8");

    System.out.println(response);

    assertTrue(response.contains("Fun=[sun], Foo=[bar]"));

    Thread.sleep(10);

    server.stop(0);


}

@Test
public void testPostBody() throws Exception {

    HttpServer server = HttpServer.create(new InetSocketAddress(9220), 0);
    server.createContext("/test", new MyHandler());
    server.setExecutor(null); // creates a default executor
    server.start();

    Thread.sleep(10);


    Map<String,String> headers = map("foo", "bar", "fun", "sun");

    String response = HTTP.postBody("http://localhost:9220/test", "hi mom");

    assertTrue(response.contains("hi mom"));


    Thread.sleep(10);

    server.stop(0);


}

@Test(expected = RuntimeException.class)
public void testSad() throws Exception {

    HttpServer server = HttpServer.create(new InetSocketAddress(9213), 0);
    server.createContext("/test", new MyHandler());
    server.setExecutor(null); // creates a default executor
    server.start();

    Thread.sleep(10);


    Map<String,String> headers = map("foo", "bar", "fun", "sun");

    String response = HTTP.postBodyWithContentType("http://localhost:9213/foo", headers, "text/plain", "hi mom");

    System.out.println(response);

    assertTrue(response.contains("hi mom"));
    assertTrue(response.contains("Fun=[sun], Foo=[bar]"));

    Thread.sleep(10);

    server.stop(0);


}

Вы можете найти отдых здесь:

https://github.com/RichardHightower/boon

Моя цель - предоставить общие вещи, которые хотелось бы сделать, немного проще, чем ...

Обновить

Новый HTTP-клиент поставляется с Java 9, но входит в состав модуля «Инкубатор» jdk.incubator.httpclient. Модули инкубатора - это средство, позволяющее API-интерфейсам получить финальную версию в руках разработчиков, в то время как API-интерфейсы продвигаются к завершению или удалению в будущем выпуске.

В Java 9 вы можете отправить GETзапрос как:

// GET
HttpResponse response = HttpRequest
    .create(new URI("http://www.stackoverflow.com"))
    .headers("Foo", "foovalue", "Bar", "barvalue")
    .GET()
    .response();

Затем вы можете изучить возвращенное HttpResponse:

int statusCode = response.statusCode();
String responseBody = response.body(HttpResponse.asString());

Так как этот новый HTTP-клиент находится в java.httpclient jdk.incubator.httpclientмодуль, вы должны объявить эту зависимость в вашем module-info.javaфайле:

module com.foo.bar {
    requires jdk.incubator.httpclient;
}

Первоначально я был введен в заблуждение этой статьей, которая одобряет HttpClient.

Позже я понял, что HttpURLConnectionсобираюсь остаться от этой статьи

Согласно блогу Google :

HTTP-клиент Apache содержит меньше ошибок в Eclair и Froyo. Это лучший выбор для этих релизов. Для Gingerbread HttpURLConnection - лучший выбор. Его простой API и небольшой размер отлично подходят для Android.

Прозрачное сжатие и кэширование ответов сокращают использование сети, повышают скорость и экономят заряд батареи. Новые приложения должны использовать HttpURLConnection; это то место, где мы будем тратить энергию вперёд.

После прочтения этой статьи и некоторых других вопросов по стеку я убежден, что HttpURLConnectionэто продлится дольше.

Некоторые из вопросов SE в пользу HttpURLConnections:

В Android сделайте запрос POST с данными в кодированной форме URL, не используя UrlEncodedFormEntity

HttpPost работает в проекте Java, а не в Android

Существует также OkHttp , который является HTTP-клиентом, который работает по умолчанию:

• Поддержка HTTP / 2 позволяет всем запросам к одному хосту совместно использовать сокет.
• Пул соединений уменьшает задержку запросов (если HTTP / 2 недоступен).
• Прозрачный GZIP сжимает размеры загрузки.
• Кэширование ответов полностью исключает повторные запросы в сети.

Сначала создайте экземпляр OkHttpClient:

OkHttpClient client = new OkHttpClient();

Затем подготовьте ваш GETзапрос:

Request request = new Request.Builder()
      .url(url)
      .build();

наконец, используйте OkHttpClientдля отправки подготовленных Request:

Response response = client.newCall(request).execute();

Для более подробной информации, вы можете обратиться к документации OkHttp

Вы также можете использовать JdkRequestиз jcabi-http (я разработчик), который выполняет всю эту работу за вас, декорируя HttpURLConnection, вызывая HTTP-запросы и анализируя ответы, например:

String html = new JdkRequest("http://www.google.com").fetch().body();

Проверьте эту запись в блоге для получения дополнительной информации: http://www.yegor256.com/2014/04/11/jcabi-http-intro.html

если вы используете http get, удалите эту строку

urlConnection.setDoOutput(true);