java - 带有 Netty 5.0 的 MITM : Browser unable to receive full http response-6ren

java - 带有 Netty 5.0 的 MITM : Browser unable to receive full http response

转载作者：行者123 更新时间：2023-11-30 08:59:22

我正在使用 Netty 5.0 构建一个 MITM 代理。这基本上是一个教育项目，只是为了让我自己学习如何构建 MITM 代理以及如何使用 Netty。与此同时，我正在使用 WebDriver 以编程方式让浏览器使用 MITM 代理进行测试。

从概念上讲，这对我来说很简单，至少对于 HTTP(HTTPS 需要一些额外的处理，但应该不会太困难)。以下是我对 MITM 代理结构的看法。

首先，代理需要两条管道。一个连接浏览器和代理(我们称之为服务器管道)。另一个将代理连接到 Internet(我们称之为客户端管道)。因此，整体结构将是这样的:
浏览器<---服务器管道---> MITM代理<---客户端管道--->互联网

其次，服务器管道可以像下面这样构造:

public void initChannel(SocketChannel ch) throws Exception {
    ChannelPipeline p = ch.pipeline();
    p.addLast(SERVER_LOGGING_HANDLER, new LoggingHandler(SERVER_LOGGING_HANDLER, LogLevel.DEBUG))
            .addLast(HTTP_SERVER_CODEC, new HttpServerCodec())
            .addLast(HTTP_CONTENT_AGGREGATOR, new HttpObjectAggregator(MAX_HTTP_CONTENT_LENGTH))
            .addLast(SERVER_HANDLER, new ServerHandler(ch));
}

客户端管道可以像下面这样构造:

protected void initChannel(SocketChannel ch) throws Exception {
    ChannelPipeline p = ch.pipeline();
    p.addLast(CLIENT_LOGGING_HANDLER, new LoggingHandler(CLIENT_LOGGING_HANDLER, LogLevel.DEBUG))
            .addLast(HTTP_CLIENT_CODEC, new HttpClientCodec())
            .addLast(HTTP_CONTENT_AGGREGATOR, new HttpObjectAggregator(MAX_HTTP_CONTENT_LENGTH))
            .addLast(CLIENT_HANDLER, new ClientHandler(ServerHandler.this, ch));
}

在上面的代码中，ServerHandler 和ClientHandler 是我自定义的类。 ClientHandler 的作用是调用ServerHandler 将接收到的内容写入浏览器。以下是这两个类的相关代码:

// ClientHandler
private ServerHandler serverHandler;
@Override
protected void messageReceived(ChannelHandlerContext ctx, HttpObject msg) throws Exception {
    log.info("client pipeline handlers: " + ctx.pipeline().names());
    if (msg instanceof FullHttpResponse) {
        FullHttpResponse response = (FullHttpResponse) msg;
        log.info("Received HTTP response:\n{}", response);
        serverHandler.writeResponse(msg);
    } else {
        ... // exception case
    }
}

// ServerHandler
public void writeResponse(HttpObject httpObject) {
    log.info("Is FullHttpResponse? {}", httpObject instanceof FullHttpResponse);
    ChannelHandlerContext context = channel.pipeline().context(this);
    context.writeAndFlush(httpObject);
    log.debug("sent response back to client");
}

我在测试中使用了 netty javadoc 页面。以下是一些相关行:

EventFiringWebDriver driver = null;
try {
    driver = getChromeDriver(proxyAddr); // get a ChromeDriver with the given proxyAddr as proxy
    driver.get("http://netty.io/5.0/api/io/netty/channel/ChannelPipeline.html");
    ...
} catch (Exception e) {
...

从代理日志中，我可以看到它能够按预期处理代理。然而，在最后一步，即将 javadoc 页面内容发送到浏览器时，似乎有些东西坏了。具体来说，FullHttpResponse 的内容长度超过 10KB，但只有不到 1KB 的数据被发送到浏览器(Chrome)。由于浏览器没有收到全部内容，它只是在地址栏中等待“数据”。

以下是可能有助于理解问题的日志(我删除了 LoggingHandler 的大部分格式化输出，只保留了一些):

2014-12-04 22:58:19.428 [Test worker] DEBUG MultithreadEventLoopGroup:debug(): -Dio.netty.eventLoopThreads: 16
2014-12-04 22:58:19.440 [Test worker] DEBUG NioEventLoop:debug(): -Dio.netty.noKeySetOptimization: false
2014-12-04 22:58:19.440 [Test worker] DEBUG NioEventLoop:debug(): -Dio.netty.selectorAutoRebuildThreshold: 512
2014-12-04 22:58:19.448 [Test worker] INFO  ProxyServer:start(): Starting proxy server.
2014-12-04 22:58:19.453 [Test worker] INFO  ProxyServer:initPorts(): Binding port 10001
2014-12-04 22:58:19.460 [Test worker] DEBUG DefaultChannelId:debug(): -Dio.netty.machineId: b8:e8:56:45:4f:e8:00:00 (auto-detected)
2014-12-04 22:58:19.461 [Test worker] DEBUG DefaultChannelId:debug(): -Dio.netty.processId: 47735 (auto-detected)
2014-12-04 22:58:19.463 [Test worker] DEBUG ThreadLocalRandom:debug(): -Dio.netty.initialSeedUniquifier: 0x0ee5184323c884e4
2014-12-04 22:58:19.469 [Test worker] DEBUG ChannelOutboundBuffer:debug(): -Dio.netty.threadLocalDirectBufferSize: 65536
2014-12-04 22:58:19.489 [Test worker] DEBUG PlatformDependent:debug(): UID: 83297
2014-12-04 22:58:19.490 [Test worker] DEBUG PlatformDependent:debug(): Java version: 7
2014-12-04 22:58:19.490 [Test worker] DEBUG PlatformDependent:debug(): -Dio.netty.noUnsafe: false
2014-12-04 22:58:19.491 [Test worker] DEBUG PlatformDependent0:debug(): java.nio.ByteBuffer.cleaner: available
2014-12-04 22:58:19.492 [Test worker] DEBUG PlatformDependent0:debug(): java.nio.Buffer.address: available
2014-12-04 22:58:19.492 [Test worker] DEBUG PlatformDependent0:debug(): sun.misc.Unsafe.theUnsafe: available
2014-12-04 22:58:19.493 [Test worker] DEBUG PlatformDependent0:debug(): sun.misc.Unsafe.copyMemory: available
2014-12-04 22:58:19.494 [Test worker] DEBUG PlatformDependent0:debug(): java.nio.Bits.unaligned: true
2014-12-04 22:58:19.494 [Test worker] DEBUG PlatformDependent:debug(): sun.misc.Unsafe: available
2014-12-04 22:58:19.495 [Test worker] DEBUG PlatformDependent:debug(): -Dio.netty.noJavassist: false
2014-12-04 22:58:19.564 [Test worker] DEBUG PlatformDependent:debug(): Javassist: available
2014-12-04 22:58:19.564 [Test worker] DEBUG PlatformDependent:debug(): -Dio.netty.noPreferDirect: false
2014-12-04 22:58:19.568 [Test worker] DEBUG NetUtil:debug(): Loopback interface: lo0
2014-12-04 22:58:19.568 [Test worker] DEBUG NetUtil:debug(): Loopback address: /fe80:0:0:0:0:0:0:1%1 (primary)
2014-12-04 22:58:19.569 [Test worker] DEBUG NetUtil:debug(): Loopback address: /0:0:0:0:0:0:0:1
2014-12-04 22:58:19.569 [Test worker] DEBUG NetUtil:debug(): Loopback address: /127.0.0.1
2014-12-04 22:58:19.576 [Test worker] INFO  ProxyServer:initPorts(): is 10001 bound? true
2014-12-04 22:58:19.576 [Test worker] INFO  ProxyServer:initPorts(): Binding port 10002
2014-12-04 22:58:19.578 [Test worker] INFO  ProxyServer:initPorts(): is 10002 bound? true

Starting ChromeDriver (v2.9.248307) on port 44495
2014-12-04 22:58:22.581 [nioEventLoopGroup-3-1] DEBUG ResourceLeakDetector:debug(): -Dio.netty.leakDetectionLevel: simple
2014-12-04 22:58:22.599 [nioEventLoopGroup-3-1] DEBUG JavassistTypeParameterMatcherGenerator:debug(): Generated: io.netty.util.internal.__matchers__.io.netty.handler.codec.http.HttpObjectMatcher
2014-12-04 22:58:22.604 [nioEventLoopGroup-3-1] DEBUG SERVER_LOGGING_HANDLER:debug(): [id: 0xad3d76c2, /0:0:0:0:0:0:0:1:57916 => /0:0:0:0:0:0:0:1:10001] REGISTERED
2014-12-04 22:58:22.605 [nioEventLoopGroup-3-1] DEBUG SERVER_LOGGING_HANDLER:debug(): [id: 0xad3d76c2, /0:0:0:0:0:0:0:1:57916 => /0:0:0:0:0:0:0:1:10001] ACTIVE
2014-12-04 22:58:22.606 [nioEventLoopGroup-3-1] DEBUG SERVER_LOGGING_HANDLER:debug(): [id: 0xad3d76c2, /0:0:0:0:0:0:0:1:57916 => /0:0:0:0:0:0:0:1:10001] RECEIVED: 413B
2014-12-04 22:58:22.615 [nioEventLoopGroup-3-1] INFO  ServerHandler:channelRead(): server pipeline handlers: [SERVER_LOGGING_HANDLER, HttpRequestDecoder#0, HttpResponseEncoder#0, HTTP_CONTENT_AGGREGATOR, SERVER_HANDLER, DefaultChannelPipeline$TailHandler#0]
2014-12-04 22:58:22.616 [nioEventLoopGroup-3-1] INFO  ServerHandler:handleInternetTraffic(): Received full request:
DefaultFullHttpRequest, decodeResult: success)
GET http://netty.io/5.0/api/io/netty/channel/ChannelPipeline.html HTTP/1.1
Host: netty.io
Proxy-Connection: keep-alive
Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8
User-Agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10_10_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/39.0.2171.71 Safari/537.36
Accept-Encoding: gzip, deflate, sdch
Accept-Language: en-US,en;q=0.8
Content-Length: 0
2014-12-04 22:58:22.616 [nioEventLoopGroup-3-1] DEBUG ServerHandler:sendToInternet(): uri: http://netty.io/5.0/api/io/netty/channel/ChannelPipeline.html
2014-12-04 22:58:22.680 [nioEventLoopGroup-4-1] INFO  ClientHandler:<init>(): Constructing new ClientHandler...
2014-12-04 22:58:22.682 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032] REGISTERED
2014-12-04 22:58:22.682 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032] CONNECT: netty.io/104.28.8.44:80
2014-12-04 22:58:22.699 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032, /192.168.1.134:57917 => netty.io/104.28.8.44:80] ACTIVE
2014-12-04 22:58:22.699 [nioEventLoopGroup-4-1] INFO  ClientHandler:write(): Write outbound message.
2014-12-04 22:58:22.700 [nioEventLoopGroup-3-1] DEBUG SERVER_LOGGING_HANDLER:debug(): [id: 0xad3d76c2, /0:0:0:0:0:0:0:1:57916 => /0:0:0:0:0:0:0:1:10001] FLUSH
2014-12-04 22:58:22.702 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032, /192.168.1.134:57917 => netty.io/104.28.8.44:80] WRITE: 432B
2014-12-04 22:58:22.702 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032, /192.168.1.134:57917 => netty.io/104.28.8.44:80] FLUSH
2014-12-04 22:58:22.879 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032, /192.168.1.134:57917 => netty.io/104.28.8.44:80] RECEIVED: 1024B
         +-------------------------------------------------+
         |  0  1  2  3  4  5  6  7  8  9  a  b  c  d  e  f |
+--------+-------------------------------------------------+----------------+
|00000000| 48 54 54 50 2f 31 2e 31 20 32 30 30 20 4f 4b 0d |HTTP/1.1 200 OK.|
|00000010| 0a 44 61 74 65 3a 20 46 72 69 2c 20 30 35 20 44 |.Date: Fri, 05 D|
|00000020| 65 63 20 32 30 31 34 20 30 36 3a 35 38 3a 32 32 |ec 2014 06:58:22|
|00000030| 20 47 4d 54 0d 0a 43 6f 6e 74 65 6e 74 2d 54 79 | GMT..Content-Ty|
|00000040| 70 65 3a 20 74 65 78 74 2f 68 74 6d 6c 3b 20 63 |pe: text/html; c|
|00000050| 68 61 72 73 65 74 3d 75 74 66 2d 38 0d 0a 54 72 |harset=utf-8..Tr|
|00000060| 61 6e 73 66 65 72 2d 45 6e 63 6f 64 69 6e 67 3a |ansfer-Encoding:|
|00000070| 20 63 68 75 6e 6b 65 64 0d 0a 43 6f 6e 6e 65 63 | chunked..Connec|
|00000080| 74 69 6f 6e 3a 20 6b 65 65 70 2d 61 6c 69 76 65 |tion: keep-alive|
|00000090| 0d 0a 53 65 74 2d 43 6f 6f 6b 69 65 3a 20 5f 5f |..Set-Cookie: __|
|000000a0| 63 66 64 75 69 64 3d 64 65 65 37 66 34 65 33 30 |cfduid=dee7f4e30|
|000000b0| 64 33 30 65 31 63 64 37 33 33 30 63 63 33 35 65 |d30e1cd7330cc35e|
|000000c0| 38 65 30 66 38 63 37 36 31 34 31 37 37 36 32 37 |8e0f8c7614177627|
|000000d0| 30 32 3b 20 65 78 70 69 72 65 73 3d 53 61 74 2c |02; expires=Sat,|
|000000e0| 20 30 35 2d 44 65 63 2d 31 35 20 30 36 3a 35 38 | 05-Dec-15 06:58|
|000000f0| 3a 32 32 20 47 4d 54 3b 20 70 61 74 68 3d 2f 3b |:22 GMT; path=/;|
|00000100| 20 64 6f 6d 61 69 6e 3d 2e 6e 65 74 74 79 2e 69 | domain=.netty.i|
|00000110| 6f 3b 20 48 74 74 70 4f 6e 6c 79 0d 0a 4c 61 73 |o; HttpOnly..Las|
|00000120| 74 2d 4d 6f 64 69 66 69 65 64 3a 20 54 68 75 2c |t-Modified: Thu,|
|00000130| 20 30 34 20 44 65 63 20 32 30 31 34 20 31 32 3a | 04 Dec 2014 12:|
|00000140| 31 32 3a 33 36 20 47 4d 54 0d 0a 45 78 70 69 72 |12:36 GMT..Expir|
|00000150| 65 73 3a 20 46 72 69 2c 20 30 35 20 44 65 63 20 |es: Fri, 05 Dec |
|00000160| 32 30 31 34 20 30 37 3a 30 38 3a 32 32 20 47 4d |2014 07:08:22 GM|
|00000170| 54 0d 0a 43 61 63 68 65 2d 43 6f 6e 74 72 6f 6c |T..Cache-Control|
|00000180| 3a 20 6d 61 78 2d 61 67 65 3d 36 30 30 0d 0a 56 |: max-age=600..V|
|00000190| 61 72 79 3a 20 41 63 63 65 70 74 2d 45 6e 63 6f |ary: Accept-Enco|
|000001a0| 64 69 6e 67 0d 0a 53 65 72 76 65 72 3a 20 63 6c |ding..Server: cl|
|000001b0| 6f 75 64 66 6c 61 72 65 2d 6e 67 69 6e 78 0d 0a |oudflare-nginx..|
|000001c0| 43 46 2d 52 41 59 3a 20 31 39 33 65 35 61 64 38 |CF-RAY: 193e5ad8|
|000001d0| 63 33 39 33 30 36 36 33 2d 53 4a 43 0d 0a 43 6f |c3930663-SJC..Co|
|000001e0| 6e 74 65 6e 74 2d 45 6e 63 6f 64 69 6e 67 3a 20 |ntent-Encoding: |
<more>
+--------+-------------------------------------------------+----------------+
2014-12-04 22:58:22.887 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032, /192.168.1.134:57917 => netty.io/104.28.8.44:80] RECEIVED: 1024B
2014-12-04 22:58:22.891 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032, /192.168.1.134:57917 => netty.io/104.28.8.44:80] RECEIVED: 1024B
2014-12-04 22:58:22.894 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032, /192.168.1.134:57917 => netty.io/104.28.8.44:80] RECEIVED: 1024B
2014-12-04 22:58:22.895 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032, /192.168.1.134:57917 => netty.io/104.28.8.44:80] RECEIVED: 1024B
2014-12-04 22:58:22.896 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032, /192.168.1.134:57917 => netty.io/104.28.8.44:80] RECEIVED: 1024B
2014-12-04 22:58:22.897 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032, /192.168.1.134:57917 => netty.io/104.28.8.44:80] RECEIVED: 1024B
2014-12-04 22:58:22.900 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032, /192.168.1.134:57917 => netty.io/104.28.8.44:80] RECEIVED: 1024B
2014-12-04 22:58:22.902 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032, /192.168.1.134:57917 => netty.io/104.28.8.44:80] RECEIVED: 1024B
2014-12-04 22:58:22.904 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032, /192.168.1.134:57917 => netty.io/104.28.8.44:80] RECEIVED: 1024B
2014-12-04 22:58:22.905 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032, /192.168.1.134:57917 => netty.io/104.28.8.44:80] RECEIVED: 1024B
2014-12-04 22:58:22.907 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032, /192.168.1.134:57917 => netty.io/104.28.8.44:80] RECEIVED: 1024B
2014-12-04 22:58:22.908 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032, /192.168.1.134:57917 => netty.io/104.28.8.44:80] RECEIVED: 569B
2014-12-04 22:58:22.933 [nioEventLoopGroup-4-1] DEBUG CLIENT_LOGGING_HANDLER:debug(): [id: 0xeafd0032, /192.168.1.134:57917 => netty.io/104.28.8.44:80] RECEIVED: 945B
2014-12-04 22:58:22.934 [nioEventLoopGroup-4-1] INFO  ClientHandler:messageReceived(): client pipeline handlers: [CLIENT_LOGGING_HANDLER, HttpClientCodec$Decoder#0, HttpClientCodec$Encoder#0, HTTP_CONTENT_AGGREGATOR, CLIENT_HANDLER, DefaultChannelPipeline$TailHandler#0]
2014-12-04 22:58:22.935 [nioEventLoopGroup-4-1] INFO  ClientHandler:messageReceived(): Received HTTP response:
DefaultFullHttpResponse(decodeResult: success)
HTTP/1.1 200 OK
Date: Fri, 05 Dec 2014 06:58:22 GMT
Content-Type: text/html; charset=utf-8
Connection: keep-alive
Set-Cookie: __cfduid=dee7f4e30d30e1cd7330cc35e8e0f8c761417762702; expires=Sat, 05-Dec-15 06:58:22 GMT; path=/; domain=.netty.io; HttpOnly
Last-Modified: Thu, 04 Dec 2014 12:12:36 GMT
Expires: Fri, 05 Dec 2014 07:08:22 GMT
Cache-Control: max-age=600
Vary: Accept-Encoding
Server: cloudflare-nginx
CF-RAY: 193e5ad8c3930663-SJC
Content-Encoding: gzip
Content-Length: 13061
2014-12-04 22:58:22.935 [nioEventLoopGroup-4-1] INFO  ServerHandler:writeResponse(): Is FullHttpResponse? true
2014-12-04 22:58:22.936 [nioEventLoopGroup-4-1] DEBUG ServerHandler:writeResponse(): httpObject size? DefaultFullHttpResponse(decodeResult: success)
HTTP/1.1 200 OK
Date: Fri, 05 Dec 2014 06:58:22 GMT
Content-Type: text/html; charset=utf-8
Connection: keep-alive
Set-Cookie: __cfduid=dee7f4e30d30e1cd7330cc35e8e0f8c761417762702; expires=Sat, 05-Dec-15 06:58:22 GMT; path=/; domain=.netty.io; HttpOnly
Last-Modified: Thu, 04 Dec 2014 12:12:36 GMT
Expires: Fri, 05 Dec 2014 07:08:22 GMT
Cache-Control: max-age=600
Vary: Accept-Encoding
Server: cloudflare-nginx
CF-RAY: 193e5ad8c3930663-SJC
Content-Encoding: gzip
Content-Length: 13061
2014-12-04 22:58:22.936 [nioEventLoopGroup-4-1] DEBUG ServerHandler:writeResponse(): sent response back to client
2014-12-04 22:58:22.937 [nioEventLoopGroup-3-1] DEBUG SERVER_LOGGING_HANDLER:debug(): [id: 0xad3d76c2, /0:0:0:0:0:0:0:1:57916 => /0:0:0:0:0:0:0:1:10001] WRITE: 499B
         +-------------------------------------------------+
         |  0  1  2  3  4  5  6  7  8  9  a  b  c  d  e  f |
+--------+-------------------------------------------------+----------------+
|00000000| 48 54 54 50 2f 31 2e 31 20 32 30 30 20 4f 4b 0d |HTTP/1.1 200 OK.|
|00000010| 0a 44 61 74 65 3a 20 46 72 69 2c 20 30 35 20 44 |.Date: Fri, 05 D|
|00000020| 65 63 20 32 30 31 34 20 30 36 3a 35 38 3a 32 32 |ec 2014 06:58:22|
|00000030| 20 47 4d 54 0d 0a 43 6f 6e 74 65 6e 74 2d 54 79 | GMT..Content-Ty|
|00000040| 70 65 3a 20 74 65 78 74 2f 68 74 6d 6c 3b 20 63 |pe: text/html; c|
|00000050| 68 61 72 73 65 74 3d 75 74 66 2d 38 0d 0a 43 6f |harset=utf-8..Co|
|00000060| 6e 6e 65 63 74 69 6f 6e 3a 20 6b 65 65 70 2d 61 |nnection: keep-a|
|00000070| 6c 69 76 65 0d 0a 53 65 74 2d 43 6f 6f 6b 69 65 |live..Set-Cookie|
|00000080| 3a 20 5f 5f 63 66 64 75 69 64 3d 64 65 65 37 66 |: __cfduid=dee7f|
|00000090| 34 65 33 30 64 33 30 65 31 63 64 37 33 33 30 63 |4e30d30e1cd7330c|
|000000a0| 63 33 35 65 38 65 30 66 38 63 37 36 31 34 31 37 |c35e8e0f8c761417|
|000000b0| 37 36 32 37 30 32 3b 20 65 78 70 69 72 65 73 3d |762702; expires=|
|000000c0| 53 61 74 2c 20 30 35 2d 44 65 63 2d 31 35 20 30 |Sat, 05-Dec-15 0|
|000000d0| 36 3a 35 38 3a 32 32 20 47 4d 54 3b 20 70 61 74 |6:58:22 GMT; pat|
|000000e0| 68 3d 2f 3b 20 64 6f 6d 61 69 6e 3d 2e 6e 65 74 |h=/; domain=.net|
|000000f0| 74 79 2e 69 6f 3b 20 48 74 74 70 4f 6e 6c 79 0d |ty.io; HttpOnly.|
|00000100| 0a 4c 61 73 74 2d 4d 6f 64 69 66 69 65 64 3a 20 |.Last-Modified: |
|00000110| 54 68 75 2c 20 30 34 20 44 65 63 20 32 30 31 34 |Thu, 04 Dec 2014|
|00000120| 20 31 32 3a 31 32 3a 33 36 20 47 4d 54 0d 0a 45 | 12:12:36 GMT..E|
|00000130| 78 70 69 72 65 73 3a 20 46 72 69 2c 20 30 35 20 |xpires: Fri, 05 |
|00000140| 44 65 63 20 32 30 31 34 20 30 37 3a 30 38 3a 32 |Dec 2014 07:08:2|
|00000150| 32 20 47 4d 54 0d 0a 43 61 63 68 65 2d 43 6f 6e |2 GMT..Cache-Con|
|00000160| 74 72 6f 6c 3a 20 6d 61 78 2d 61 67 65 3d 36 30 |trol: max-age=60|
|00000170| 30 0d 0a 56 61 72 79 3a 20 41 63 63 65 70 74 2d |0..Vary: Accept-|
|00000180| 45 6e 63 6f 64 69 6e 67 0d 0a 53 65 72 76 65 72 |Encoding..Server|
|00000190| 3a 20 63 6c 6f 75 64 66 6c 61 72 65 2d 6e 67 69 |: cloudflare-ngi|
|000001a0| 6e 78 0d 0a 43 46 2d 52 41 59 3a 20 31 39 33 65 |nx..CF-RAY: 193e|
|000001b0| 35 61 64 38 63 33 39 33 30 36 36 33 2d 53 4a 43 |5ad8c3930663-SJC|
|000001c0| 0d 0a 43 6f 6e 74 65 6e 74 2d 45 6e 63 6f 64 69 |..Content-Encodi|
|000001d0| 6e 67 3a 20 67 7a 69 70 0d 0a 43 6f 6e 74 65 6e |ng: gzip..Conten|
|000001e0| 74 2d 4c 65 6e 67 74 68 3a 20 31 33 30 36 31 0d |t-Length: 13061.|
|000001f0| 0a 0d 0a                                        |...             |
+--------+-------------------------------------------------+----------------+
2014-12-04 22:58:22.937 [nioEventLoopGroup-3-1] DEBUG SERVER_LOGGING_HANDLER:debug(): [id: 0xad3d76c2, /0:0:0:0:0:0:0:1:57916 => /0:0:0:0:0:0:0:1:10001] FLUSH

日志可能不是那么简单，因为我没有粘贴我所有的代码，但我希望你能在上面的日志中找到代理能够传递浏览器请求并从互联网获得响应的证据。从日志的最后一部分，可以看到接收到的Content-Length是13061，但是只有499B的数据返回给浏览器。顺便说一句，之后什么也没有发生。我对这个结果完全感到困惑，因为在 ServerHandler.writeRespone(HttpObject) 方法中，我调用了 context.writeAndFlush(httpObject) 来发送完整的对象。那么，我在这里缺少什么？

更新
由于客户端管道中有一个 HttpObjectAggregator，因此 ClientHandler 始终会收到 FullHttpResponse，这些日志已确认(从上面复制):

2014-12-04 22:58:22.935 [nioEventLoopGroup-4-1] INFO  ClientHandler:messageReceived(): Received HTTP response:
DefaultFullHttpResponse(decodeResult: success)

最佳答案

看起来您只转发了接收到的消息的“ header ”部分，而不是正文部分(下一个缓冲区)。

但是当您使用 HttpObjectAggregator 时，它应该是您从客户端获得并因此发送到服务器的 FullHttpResponse。

在 Netty 中，HTTP 消息分为 3 个部分:

标题部分
body 部位( block )
block 结束(空 block )

通常，使用 HttpObjectAggregator 会将它们全部合并为一个简单的完整消息。

你能仔细检查一下你发回的是否真的是一个带有正文内容的 FullHttpResponse(在每一步)？

您是否还管理了 FullHttpResponse 上的 retain() 方法，以便客户端在发送回之前不释放缓冲区？

关于java - 带有 Netty 5.0 的 MITM : Browser unable to receive full http response，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/27311207/

文章推荐： java - word Array 程序出站错误

文章推荐： javascript getelementbyid 不工作，因为 id 改变了

文章推荐： javascript - 滚动时 HTML/CSS 元素消失。

ruby MITM 代理
我正在搜索有关如何使用支持 HTTPS 的 Ruby 编写代理的一些示例。我有一个使用 Webricks HTTPProxyServer 实现的简单代理，但我注意到，HTTPS 流量只是隧道传输(它应
java - 黑客可以通过从客户端的信任库中提取证书来创建 MITM 攻击吗？
我对 SSL 比较陌生，终于在 Java 中完成了 SSL 的代码实现后，我很好奇潜在的缺陷。我的代码由两个 SSLSockets 组成(其中之一是服务器端的 SSLServerSocket)，并且
security - 防止对服务器的 MITM 攻击
两个客户端 Alice 和 Bob 使用服务器登录并通过服务器交换消息。登录时，他们都发送他们的公钥以存储在服务器上。当 Alice 想与 Bob 通话时，她用 Bob 的公钥加密一个对称 key ，
networking - 有没有办法在不加密的情况下避免 MITM 攻击？
玩家通过身份验证后，他会收到一个随机的、唯一的识别 token 。他发送的每个数据包都包含 token 。典型的消息是: token sequence_number commands 问题是，如果有人
python - MITM 代理，获取整个请求和响应字符串
我正在使用 mitmproxy 来拦截流量。我想要的是能够在字符串中获取整个请求和响应。我知道您有 def response(context, flow) ，并且 HTTPFlow 对象具有请求和响应
ios - 使用证书固定和公司 MITM 的兼容性
我知道 Google 使用证书固定，并且可以允许用户安装的证书覆盖固定，以便与某些公司的 MITM 兼容。 AFNetworking 是否支持覆盖类型？最佳答案我发现此资源详细说明了如何使用 AF
ios - 要求客户端证书是否能有效消除 MITM 攻击？
我们已经使用 iOS7 应用程序和 Apache 服务器实现并成功验证了客户端证书检查。问题是:这足以抵御 MITM 攻击，还是我们还应该实现某种证书检查(如此处概述的 https://web.arc
ruby SSL 代理(MITM)
我想代理 SSL 数据，在本例中为 HTTPS。这是我的代码: begin server = TCPServer.open(on_demand_port) rescue Except
android https - 在缺少证书验证时演示 MITM
我需要设置一个演示 Android 应用程序，以帮助了解忽略证书验证如何导致 MITM。目前，我的测试服务器有一个自签名证书，创建如下(参见 here): sudo openssl req -x5
android - 带有 MITM 的强制门户页面
我有一台微型计算机，用于在客户登录 Wi-Fi 网络时向他们显示一个门户页面。问题是，由于某种原因，他们无法从手机/PC 上获得通常的弹出窗口，而当我对路由器执行相同的操作时，它会正常工作。我正在
ios - MITM 攻击报告已弃用的 NSURLConnectionDelegate
我有一个 Objective-C 项目，其 .ipa 已使用此工具在线测试:https://www.immuniweb.com/mobile 它报告我的应用程序存在高风险安全问题，指向 NSURLCo
java - LittleProxy-mitm 不会正确中继 HTTPS
我正在尝试执行 man-in-the-middle 攻击 HTTPS通过中继所有流量并挑选出某些流量进行修改来连接。我查看了 LittleProxy-mitm 以及 LittleProxy 这些项目看
java - 创建 Java 代理 MITM
我正在尝试创建一个 Java 程序作为代理来查看来自传入源的数据包以进行调试。为此，我创建了一个简单的 Java 服务器应用程序，并编辑了设备上的主机文件。到目前为止，一切都工作正常(甚至是我的中继类
SSL MITM 和 java 小程序
我目前正在从事一个项目，该项目涉及在客户端(浏览器)构建数字堡垒，以减轻对 SSL 的 PKI 基础设施的中间人攻击。尽管它们有多种可能对 SSL 连接发起中间人攻击，但我打算重点关注 PKI 基础设
security - 蓝牙 key 如何防止 MITM 攻击
我正在阅读低功耗蓝牙:开发人员手册，并对 MITM 的保护感到困惑。书中说，交换配对信息后，双方会产生一个随机数。与该随机数一起，计算确认值。然后双方交换确认值，然后显示随机数。交换的消息是这样配
asp.net - HTTPS 和 MITM 攻击
我计划从登录屏幕开始，在 HTTPS 中运行应用程序的登录部分。一旦用户登录并完全通过 HTTPS 继续其 session ，如何执行 MITM 攻击？这种攻击不是要弄清楚双方在说什么吗？我正在使用
ios - 保护 iOS 应用程序免受 MITM 攻击
出于教育目的，我目前正在分解一个应用程序，看看我是否可以公开它的 API。到目前为止，我做得很好。我找出了 API 的位置，并且通过使用 SSL 代理(例如 Charles)，我也能够解密客户端和服务
iphone - 针对 MITM 验证 SSL 证书
我正在通过 HTTPS 从 iOS 应用程序与我的服务器进行通信，并希望对其进行一些强化以降低中间人攻击的风险。验证检测 MITM 攻击的最佳 X.509 字段是哪些？验证证书的序列号和颁发者签名是
ruby - 如何为 MITM 攻击提供有效的 SSL 证书？
我在写一个Ruby代码，模拟一个DNS服务器，在域名不存在的情况下返回自己的IP。例如，如果服务器收到对 google.com 的请求，它将指向真正的 google 站点。另一方面，如果请求指向不存在
windows - SSL - Windows 上的可信 mitm 攻击
我对此感到有点无助。我需要一个可以对从本地主机到远程主机(不仅仅是 HTTPS!)的任何选定 SSL 流执行 MITM 的工具。搜索这样的应用程序似乎是一项非常困难的任务，因为所有应用程序似乎都遵循这

行者123

个人简介

我是一名优秀的程序员,十分优秀！

作者热门文章

滴滴打车优惠券免费领取

全站热门文章

首页

博学

6Ren·AI

商城

java - 带有 Netty 5.0 的 MITM : Browser unable to receive full http response