Java URL用法

Java 评论
  1. URL

1
scheme:scheme-specific-part (模式:模式特有部分)

URI模式包含 data, file, ftp, http, news, telnet, urn (还有基于JAVA的rmi, jndi 等非标准模式,也称为protocol)
例如：http://www.yu66.wang/2015/10/13/%E5%B7%A5%E5%85%B7/2015-10-12-AWK/这个例子中模式为http, 负责解析该URI的机构yu66.wang 负责将/2015/10/13/%E5%B7%A5%E5%85%B7/2015-10-12-AWK/地址映射到主机资源

还有的URI路径中含有? 这是URI的查询部分.后面紧跟查询参数,多个参数用&分割. 例如：git@github.com:yu66/VertxServer.git该URI中模式为git 解析结构为github.com 还可以在git和@之间加上用户名和密码git://username:password@github.com:yu66/VertxServer.git

URI一般由以下组成

  • 模式

  • URI解析结构

  • 资源路径

  • 查询参数构成

  • URL ： 指向Internet上某个位置的某个文件.用于标识Internet上的资源位置. 指定访问服务器的协议, 服务器名, 文件在次服务器上的位置protocol://username@hostname:port/path/filename?query##fragment协议可以看成是模式但是它不包含URN.

  • URN ：不指向位置的资源名. (具体的内容参考例子磁力链接)urn:namespace:resource_name. namespace:某个授权机构维护的某类资源的集合名. resource_name 集合中的资源名

这里简述一下相对URL. 举例来说<a href="java.html"> 这个超链接会继承父文档(当前文档)的协议, 主机名, 资源路径.java.html会替换掉,父文档里最后的文件名,还有例如<a href="/demo/java.html"> 那这个超链接会将主机名后的资源路径一起换掉 ，用该路径替换

Java支持的传输协议：

  • 超文本传输协议: http://www.baidu.com
  • 安全http协议: https://www.amazon.com/exec/obidos/order2
  • 文件传输协议: ftp://metalab.unc.edu/pub/languages/java/javafaq
  • 简单邮件传输协议: mailto:elharo@metalab.unc.edu
  • telnet协议: telnet://dibner.poly.edu
  • 本地文件访问协议: file:
  • gopher: gopher://gopher.anc.org.za
  • 轻量级目录访问协议: ldap://ldap.itd.umich.edu
  • jar: jar://
  • NFS,网络文件协议: nfs://utopia.poly.edu/usr/tmp
  • JDBC 定制协议 通过java.sql包支持: jdbc:mysql://luna.matalab.unc.edu:3306/NEWS
  • rmi 远程方法的调用协议 通过java.rmi包支持: rmi://metalab.unc.edu/RenderEngine
  • HotJava的定制协议: doc:/UserGuide/release.html,netdoc:/UserGuide/release.html, systemresource://www.adc.org/+/index.html, verbatim:http://www.adc.org

URL

URL使用的字符必须来自ASCII的子集(大写字母A-Z,小写字母a-z,数字0-9, 标点字符 - _ . ! ~ * ' ,) 需要注意的是/ & ? @ # ; $ + = % 也可以使用,但是必须转换为字节(每个字节为%后跟俩个16进制数字)(空格编码为+) 所以URL组成的内容是ASCII的子集 + 经过转换后的字节 但是URL不会自动地进行编码和解码因此我们需要URLEncoder来进行编码

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18

// 解码由x-www-form-url-encoded格式编码的字符串
    @Test
    public void testSpace() {
        String base64 = "wKOS4FsxiFvE48KGGSuSkRui9Iap1ukgl1+eVqZiGhXQYYiP8KGCV%2FRIeTEyMLsWxE%2FEx6jhuW3DPUt4JYX+cohUOqFVVaQ%2FioGZCAge3ygaCz%2Fe4q8o9XQzOEtcdXPywGZ0e5sgE787ij4dRZy2ILK2cxsVvC8yrlIPGZ3LUg8nOj8oEg5l2AnQnA3i+Sxbgqmwe1OjIXVZqPZWb+Y4SVQL8EpWlmEjXb4HjgmGTgVYzwJ64QO7HUPP1yuQHkS0PLS%2FpbPrgL5vqTF7h%2FPvMw=%3D";
        String decoded = null;
        try {
            decoded = URLDecoder.decode(base64);
        } catch (UnsupportedEncodingException e) {
            e.printStackTrace();
        } catch (IllegalArgumentException e) {
            // 如果url包含一个%而后却没有2个16进制数字 抛出该异常
            e.printStackTrace();
        }
        System.out.println(decoded);
        byte[] decode = UrlBase64.decode(base64);
        System.out.println(new String(decode));
    }

需要注意额是= 和 & URLEncoder会进行盲目地编码 因此在使用URLEncoder编码时避免将整个url字串都编码

1
2
3
4
5
6
7
8
9
10
11
12
print("  : " + URLEncoder.encode(" ", "UTF-8"));
print("= : " + URLEncoder.encode("=", "UTF-8"));
print("& : " + URLEncoder.encode("&", "UTF-8"));
print("* : " + URLEncoder.encode("*", "UTF-8"));
print("% : " + URLEncoder.encode("%", "UTF-8"));
print("+ : " + URLEncoder.encode("+", "UTF-8"));
print("/ : " + URLEncoder.encode("/", "UTF-8"));
print(". : " + URLEncoder.encode(".", "UTF-8"));
print(": : " + URLEncoder.encode(":", "UTF-8"));
print("~ : " + URLEncoder.encode("~", "UTF-8"));
print("\" : " + URLEncoder.encode("\"", "UTF-8"));
print("() : " + URLEncoder.encode("(url)", "UTF-8"));

不带端口构造URL(需要注意的是：该构造器生成的URL端口为-1,所以回使用该协议的默认端口 第三个参数加反斜线也是需要注意的)

1
URL url = new URL("http" , "www.eff.org", "/blueribbon.html#intro");

带端口构造URL

1
URL url = new URL("http" , "www.eff.org", 8080, "/blueribbon.html#intro");

根据相对URL和基础URL构建一个绝对URL,当希望迭代处理位于相同目录下的一组文件时, 可以考虑使用该构造器

1
2
3
URL url = new URL("http://ibiblio.org/javafaq/index.html");
URL newURL = new URL(url, "mailinglists.html");
Assert.assertEquals("http://ibiblio.org/javafaq/mailinglists.html", newURL.toString());

利用ClassLoader可以加载资源,例如图片 音频等

1
2
URL url = ClassLoader.getSystemResource("resource/simple.txt");
Assert.assertEquals(null, url);

利用ClassLoader可以加载资源,例如图片 音频等

1
2
URL url = getClass().getResource("resource/simple.txt");
Assert.assertEquals(null, url);

查看URL中的模式

1
2
3
4
URL url = new URL("http://ibiblio.org/javafaq/index.html");
Assert.assertEquals("http", url.getProtocol());
URL url = new URL("http://www.ibiblio.org/javafaq/index.html");
Assert.assertEquals("www.ibiblio.org", url.getHost());

查看URL中的路径 (范围：主机名后面的第一个/ 到片段标示符# 之前) 包含查询字符串

1
2
URL url = new URL("http://ibiblio.org/nywc/compositions.pthml?category=Piano");
Assert.assertEquals("/nywc/compositions.pthml?category=Piano", url.getFile());

查看URL中的路径 (范围：主机名后面的第一个/ 到片段标示符# 之前) 不包含查询字符串

1
2
URL url = new URL("http://ibiblio.org/nywc/compositions.pthml?category=Piano");
Assert.assertEquals("/nywc/compositions.pthml", url.getPath());

查看URL中的查询字符串

1
2
URL url = new URL("http://ibiblio.org/nywc/compositions.pthml?category=Piano");
Assert.assertEquals("category=Piano", url.getQuery());

查看URL中的查询字符串

1
2
URL url = new URL("ftp://mp3:secret@ftp.example.com/c%3a/stuff/mp3");
Assert.assertEquals("mp3:secret", url.getUserInfo());

查看URL中的Authority(授权机构,包含用户信息,主机和端口.一般都回返回主机信息,但是不一定包含用户信息和端口)

1
2
URL url = new URL("ftp://mp3:secret@ftp.example.com/c%3a/stuff/mp3");
Assert.assertEquals("mp3:secret@ftp.example.com", url.getAuthority());

sameFile 只是简单的测试url中的主机名是否是别名, 需要更细致的测试, sameFile 与 equals的区别是sameFile不考虑标示符儿equals需要考虑标示符

1
2
3
4
5
6
URL u1 = new URL("http://www.ncsa.uiuc.edu/HTMLPrimer.html#GS");
URL u2 = new URL("http://www.ncsa.uiuc.edu/HTMLPrimer.html#HD");
if(u1.sameFile(u2))
    System.out.println(u1 + " is same file with " + u2);
else
    System.out.println(u1 + " is not same file with " + u2);

连接URl所指向的资源.执行客户端和服务器之间任何必要的握手.返回一个可以读取数据的InputStream,该流读取文件里的原始内容,不包括任何HTTP首部或者任何与协议有关的信息

1
2
3
4
5
6
7
try(InputStream in = new URL("http://www.baidu.com").openStream()) {
    int c = 0;
    while((c = in.read()) != -1) {
    if(c == '<') System.out.println();
        System.out.write(c);
    }
}

openConnection打开指定URL的socket,返回URLConnection对象(一个打开网络资源的连接)

1
2
3
4
5
6
7
URLConnection conn = new URL("http://www.baidu.com").openConnection();
try(InputStream in = conn.getInputStream()) {
    int c = 0;
    while((c = in.read()) != -1) {
        System.out.write(c);
    }
}

王明Coder

一个纯粹的技术开发者。