Home avatar

分享Python/Java/Go/Rust编程技术,AI创作爱好者

常见互联网高可用架构

高可用HA(High Availability)是分布式系统架构设计中必须考虑的因素之一, 它通常是指,通过设计减少系统不能提供服务的时间。

单点往往是系统高可用最大的风险和敌人,应该尽量在系统设计的过程中避免单点。 高可用保证的原则是"集群化",或者叫"冗余":只有一个单点,挂了服务会受影响。 如果有冗余备份,挂了还有其他backup能够顶上。

Java泛型的PECS原则

在泛型编程时,使用部分限定的形参时,<? super T>和<? extends T>的使用场景容易混淆, PECS原则可以帮助我们很好记住它们:提供者(Provider)使用extends,消费者(Consumer)使用super。

聊聊Reactor IO模型

上一篇介绍了Unix系统支持的I/O模型,以及相应的在Java中的实现方式。本篇重点讲解一下Reactor模型原理和实现机制。

I/O多路复用又被称为"事件驱动",就是通过一种机制,一个进程可以监视多个描述符,一旦某个描述符就绪(一般是读就绪或者写就绪), 能够通知程序进行相应的读写操作,技术上是通过调用操作系统的select、pselect、poll、epoll来实现。

聊聊Java中的几种IO模型

同步、异步、阻塞、非阻塞都是和I/O(输入输出)有关的概念,最简单的文件读取就是I/O操作。而在文件读取这件事儿上,可以有多种方式。

本篇会先介绍一下I/O的基本概念,通过一个生活例子来分别解释下这几种I/O模型,以及Java支持的I/O模型。

Nginx打印请求头和响应头

在Nginx调试问题的时候经常需要打印请求头和响应头信息,这里记录一下Nginx日志的配置方法。

编辑nginx.conf配置文件。

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
http {
    log_format log_req_resp '$remote_addr - $remote_user [$time_local] ' '"$request" 
        $status $body_bytes_sent ' "$http_referer" "$http_user_agent"  
        $http_x_real_ip $http_x_forwarded_for $request_time $content_type 
        $host $http_authorization $http_x_sdk_date $http_x_sdk_content_sha256  
        '"$http_referer" "$http_user_agent" $request_time req_body:"$request_body"'  
        ' resp_body:"$resp_body" resp_header:"$resp_header"';
    log_format log_req_resp '$remote_addr | $http_x_real_ip | $http_x_forwarded_for ' 
        '"$request" $status' "$http_referer" "$http_user_agent"  $request_time 
        $content_type $host 'resp_header:"$resp_header"';
    server {
        access_log logs/access.log log_req_resp; 
        set $req_header "";
        set $resp_header "";
        header_filter_by_lua '
            local h = ngx.resp.get_headers()
            for k, v in pairs(h) do
                if type(v) == "table" then
                    for k, vv in pairs(v) do
                        ngx.var.resp_header = ngx.var.resp_header..k..": "..vv;
                    end
                else
                    ngx.var.resp_header = ngx.var.resp_header..k..": "..v;
                end
            end
        ';
        set $resp_body "";
        body_filter_by_lua '
          local resp_body = string.sub(ngx.arg[1], 1, 1000)
          ngx.ctx.buffered = (ngx.ctx.buffered or "") .. resp_body
          if ngx.arg[2] then
             ngx.var.resp_body = ngx.ctx.buffered
          end
        ';
    }
}

注意:自定义响应头通过使用http_开头即可。

Nginx获取客户端真实IP地址

一般的应用都是通过Nginx来做为反向代理,并且Nginx还可能是多层的。如果想在内部服务里面获取最原始的客户端IP地址。 则需要做一些配置。

最外层Nginx

为了防止X-Forwarded-For头的伪造,可在最外层Nginx将X-Forwarded-For设置为真实IP $remote_addr。 $remote_addr是获取的是直接TCP连接的客户端IP(类似于Java中的request.getRemoteAddr()), 这个是无法伪造的,即使客户端伪造也会被覆盖掉,而不是追加。