Java函数：如何通过URL获取网页内容？

在Java中，可以通过URL对象来获取网页的内容。URL类是Java.net包中的一个类，用于表示网络资源的地址。

要通过URL获取网页的内容，需要遵循以下步骤：

1. 创建URL对象

通过构造函数创建URL对象，需要传入网页的URL地址。例如：

URL url = new URL("http://www.example.com");

2. 打开网络连接

使用URL对象的openConnection()方法打开网络连接。例如：

URLConnection conn = url.openConnection();

3. 设置请求头

可以通过URLConnection对象的setRequestProperty()方法设置请求头，例如：

conn.setRequestProperty("User-Agent", "Mozilla/5.0");

在设置请求头时，常见的还有Cookie、Referer等。

4. 获取输入流

通过URLConnection对象的getInputStream()方法获取输入流，该输入流即为网页的内容。例如：

InputStream in = conn.getInputStream();

5. 读取输入流

通过输入流可以读取网页的内容。常规的方式是使用BufferedReader类，例如：

BufferedReader reader = new BufferedReader(new InputStreamReader(in));
String line;
while ((line = reader.readLine()) != null) {
    System.out.println(line);
}

在读取输入流时，需要注意字符编码，一般可以通过URLConnection对象的getContentEncoding()方法获取网页的字符编码。

完整的代码示例如下：

import java.io.BufferedReader;
import java.io.InputStream;
import java.io.InputStreamReader;
import java.net.URL;
import java.net.URLConnection;

public class UrlUtil {

    public static void main(String[] args) throws Exception {
        URL url = new URL("http://www.example.com");
        URLConnection conn = url.openConnection();
        conn.setRequestProperty("User-Agent", "Mozilla/5.0");
        InputStream in = conn.getInputStream();
        String encoding = conn.getContentEncoding();
        if (encoding == null) {
            encoding = "UTF-8";
        }
        BufferedReader reader = new BufferedReader(new InputStreamReader(in, encoding));
        String line;
        while ((line = reader.readLine()) != null) {
            System.out.println(line);
        }
        reader.close();
    }

}

需要注意的是，通过URL获取网页的内容需要考虑网络的延迟和异常情况，建议在程序中做好异常处理和关闭输入流的处理。