一、设置系统代理
方法如下:
java -Dhttp.proxyHost=192.168.254.254 -Dhttp.proxyPort=9000 com.domain.Program
或
System.setProperty("http.proxyHost", "192.168.254.254");
System.setProperty("http.proxyPort", "9000");
System.setProperty("http.nonProxyHosts", "java.oreilly.com|xml.oreilly.com"); //这两个主机不要代理
二、代理类java.net.Proxy
Proxy中的三个枚举对象
-
Proxy.Type.DIRECT
-
Proxy.Type.HTTP
-
Proxy.Type.SOCKS
对于一个代理服务器来说最重要的就是IP和port,下面的代码制作了一个Http代理
- SocketAddress address = new InetSocketAddress("proxy.example.com", 80);
- Proxy proxy = new Proxy(Proxy.Type.HTTP, address);
三、java 1.5 中新增加了一个类 ProxySelector 具体用法,用到时请查Java Network programming chapter7 7.4
转:
今天再测试Socket编程时,无法连接外网。公司用的是Http的代理。上网搜索也没看太懂,所以花了大量时间来学习。看了HTTP和TCP协议的关系好,才有所明白。现在能通过Socket使用HTTP代理了,结果很简单,过程却好难。
1. 先简要说说HTTP和TCP(具体内容自行Google,资料很多很全),这里就讲讲要点:
HTTP:是应用层协议,是基于传输层协议的。
TCP: 是传输层协议,是基于网络层协议的。
IP: 是网络层协议。
一个TCP的连接要进行三次握手(就像转户口一样,不详说),HTTP只是一个应用协议,也就是相当于一个自定义协议,即其没有对底层的传输方式进行干涉,只是对数据内容格式进行了定义。打个比方,别人说“SB”(你的名字),你回答“是”,仅仅是内容格式,没有改变声音的传输方式(通过声波传送<网络硬件介质>,通过双方都能听懂的语言<TCP/IP>)。同理,FTP, Telnet也是一种应用层协议,打个比方对于FTP,别人说“SB",你回答“哎”,只是格式内容不同而已。
2. 认识到以上之后,我们再说说HTTP代理,从上可以理解,HTTP代理服务器就是这样一台机器:你把所有的HTTP请求(不管是想请求百度还是Google)都发到这个HTTP代理服务器,然后这个HTTP代理服务器请求你要访问的最终地址,把响应回传给你。这里还要注意它代理的是HTTP协议,而HTTP又是基于TCP的,也就是说这个服务器代理的是指定HTTP内容格式的TCP连接。再说下去也没意思了,看以下代码:
- //以下地址是代理服务器的地址
- Socket socket = new Socket("10.1.2.188", 80);
- //写与的内容就是遵循HTTP请求协议格式的内容,请求百度
- socket.getOutputStream().write(new String("GET http://www.baidu.com/ HTTP/1.1\r\n\r\n").getBytes());
- byte[] bs = new byte[1024];
- InputStream is = socket.getInputStream();
- int i;
- while ((i = is.read(bs)) > 0) {
- System.out.println(new String(bs, 0, i));
- }
- is.close();
- //以下地址是代理服务器的地址
- Socket socket = new Socket("10.1.2.188", 80);
- //写与的内容就是遵循HTTP请求协议格式的内容,请求百度
- socket.getOutputStream().write(new String("GET http://www.baidu.com/ HTTP/1.1\r\n\r\n").getBytes());
- byte[] bs = new byte[1024];
- InputStream is = socket.getInputStream();
- int i;
- while ((i = is.read(bs)) > 0) {
- System.out.println(new String(bs, 0, i));
- }
- is.close();
当然在Java中,有Proxy代理上网的使用,此时使用URL(HTTP)就不涉及Socket(TCP)了,看如下代码
- //设置代理
- System.setProperty("http.proxySet", "true");
- System.setProperty("http.proxyHost", "10.1.2.188");
- System.setProperty("http.proxyPort", "80");
- //直接访问目的地址
- URL url = new URL("http://www.baidu.com");
- URLConnection con = url.openConnection();
- InputStreamReader isr = new InputStreamReader(con.getInputStream());
- char[] cs = new char[1024];
- int i = 0;
- while ((i = isr.read(cs)) > 0) {
- System.out.println(new String(cs, 0, i));
- }
- isr.close();
- //设置代理
- System.setProperty("http.proxySet", "true");
- System.setProperty("http.proxyHost", "10.1.2.188");
- System.setProperty("http.proxyPort", "80");
- //直接访问目的地址
- URL url = new URL("http://www.baidu.com");
- URLConnection con = url.openConnection();
- InputStreamReader isr = new InputStreamReader(con.getInputStream());
- char[] cs = new char[1024];
- int i = 0;
- while ((i = isr.read(cs)) > 0) {
- System.out.println(new String(cs, 0, i));
- }
- isr.close();
最后总结一下:
在使用HTTP代理的环境中,
如果使用Socket(TCP)连接外网,则直接连接代理服务器,然后在发送的HTTP请求中指明要转发到的外网网址。
如果使用URL(HTTP)连接外网,则需要设置HTTP代理参数或使用Proxy。
OK,明白以后可以随意使用了,看以下代码,使用NIO的Socket通过HTTP代理访问外网的例子:
- SocketChannel sc = SocketChannel.open(new InetSocketAddress("10.1.2.188", 80));
- sc.write(Charset.forName("utf8").encode("GET http://www.baidu.com/ HTTP/1.1\r\n\r\n"));
- ByteBuffer buffer = ByteBuffer.allocate(1024);
- while (sc.read(buffer) != -1) {
- buffer.flip();
- System.out.println(Charset.forName("utf8").decode(buffer));
- buffer.clear();
- }
- sc.close();
- SocketChannel sc = SocketChannel.open(new InetSocketAddress("10.1.2.188", 80));
- sc.write(Charset.forName("utf8").encode("GET http://www.baidu.com/ HTTP/1.1\r\n\r\n"));
- ByteBuffer buffer = ByteBuffer.allocate(1024);
- while (sc.read(buffer) != -1) {
- buffer.flip();
- System.out.println(Charset.forName("utf8").decode(buffer));
- buffer.clear();
- }
- sc.close();
《《以下是从摘自他人的博客》》:http://hi.baidu.com/splike/blog/item/ed2191d7c94360d1a144dfe3.html
Java Socket编程中加入代理2010-06-02 11:12
相关推荐
介绍了java中如何设置http代理的方法 并且有具体例子和注释
HTTP代理服务器java 简单网站过滤
实现了一份jdk动态代理的demo,做了详细注释,供以后复习使用,另外,这里为什么需要大于100个字节才能传资源?我就不想那么多不行吗???
获取网络资源,使用动态代理ip解决单个ip访问次数限制问题
http代理,java开发,有3个工程
用于基于Java HttpURLConnection类测试https代理设置的Java代码。 该代码实际上可以连接到任何URL,但仅响应https.proxyUser和https.ProxyPassword系统属性。 用法: $ java <java> -jar testwebpage.jar sherif@...
实现了对http的协议的解包、打包和对chunk包的处理,演示http代理的原理,如果开发吞吐量更大的应该使用noi模型。需在浏览器上设置代理,以便测试程序
这是Java Servlet形式的HTTP代理(也称为网关)。 HTTP代理对于AJAX应用程序与托管Web应用程序以外的主机上的Web可访问服务进行通信很有用。 它是反向代理,实际上不是转发代理,尽管Servlet的模板形式可能会使这条...
util实现Java图片水印添加功能,有添加图片水印和文字水印,可以设置水印位置,透明度、设置对线段锯齿状边缘处理、水印图片的路径,水印一般格式是gif,png,这种图片可以设置透明度、水印旋转等,可以参考代码...
util实现Java图片水印添加功能,有添加图片水印和文字水印,可以设置水印位置,透明度、设置对线段锯齿状边缘处理、水印图片的路径,水印一般格式是gif,png,这种图片可以设置透明度、水印旋转等,可以参考代码...
9.HttpProxy.java 代理设置 10.CaptureScreen.java 截取桌面 11.XmlReaer.java 读写xml文件 12.ArrayConvers.java 数组与map/list的转换 13.NumberCalc.java 对数字进行操作 14.ServerConn.java与ClientConn 先运行...
Proxyee是JAVA编写的HTTP代理服务器库,它支持HTTP,HTTPS,Websocket协议,并支持MITM(中间人),它可以捕获和篡改HTTP,HTTPS数据包。 用法 < groupId>com.github.monkeywie</ groupId> < artifactId>proxyee ...
该工具类是使用建造者模式开发的Java Http请求工具类,使用非常简单...包含GET,POST,PUT,DELETE四种方式的请求,并且支持代理设置和文件上传等功能。使用方式请查看https://mp.csdn.net/console/editor/html/105293300
代理服务器,ProxyServer.java; telnet客户端,访问系统的telnet服务实质上是与telnet服务建立socket连接,默认的telnet服务的端口是23,TelnetClient.java; UDP编程,包括收发udp报文; 聊天室服务器端,Chat...
遵守规则: 为避免对网站造成过大负担或触发反爬虫机制,爬虫需要遵守网站的robots.txt协议,限制访问频率和深度,并模拟人类访问行为,如设置User-Agent。 反爬虫应对: 由于爬虫的存在,一些网站采取了反爬虫措施...
154.kafka 同时设置了 7 天和 10G 清除数据,到第五天的时候消息达到了 10G,这个时候 kafka 将如何处理? 155.什么情况会导致 kafka 运行变慢? 156.使用 kafka 集群需要注意什么? 十六、Zookeeper 157.zookeeper ...
全部代码出自电子工业出版社夏先波的《Java JDK实例宝典》一书,本书以J2SE 5.0为开发环境,选取Java应用的典型实例,循序渐进地介绍了Java语言的各种开发方法和技巧,实例代码注释详细规范,思路清晰。 第1章 ...
设置代理 $proxy_http = "http://138.68.165.154:3128"; $proxy_https = "https://202.53.169.199:3128"; $proxy_socks4 = "socks4://94.158.70.129:1080"; $proxy_socks5 = "socks5://173.230.95.147:45454"; $...
CMWAP是要设置代理才能上的 HTTP代理设置为10.0.0.172 端口:80 推荐用动感挪移这个代理软件,基本上可以使CMWAP当作CMNET来用!
"类的初始化过程 当创建一个对象时,对象的各个变量根据其类型被设置为相应的默认初始值,然后调用构造方法,而每次调用构造方法都是要执行三个阶段: 1.调用超类的构造方法; 2.由初始化语句对给变量进行初始化...