AWS ELB 服务的坑

目前发现AWS ELB服务有两个大坑:

  1. 基于HTTP的负载均衡频繁504,直接是ELB返回的,后端根本就没接收到请求。
  2. 基于TCP的负载均衡没法获取到客户端IP地址。

 

TCP 负载均衡其实是把客户端的请求截断,然后自己发送一个请求给后端,拿到后端返回的数据之后再返回给 客户端,这样后端看到的是 负载均衡器的IP,看不到客户端的真实IP了 (如果用基于HTTP的Load Balancer,会自动在HTTP头记录 X-Forwarded-For , 后端自然很容易获取到源IP )。其实这和LVS FULLNAT 模式有点像,LVS FULLNAT的解决办法是把真实IP写在TCP option里面,然后后端用toa模块拿到。

对于这个问题,AWS给了一个解决办法,叫做  Proxy Protocol ,可以对TCP 负载均衡器开启Proxy Protocol,它会在请求的第一行写入 源IP、源端口等信息,以 \r\n 结尾,格式如下:

PROXY_STRING + single space + INET_PROTOCOL + single space + CLIENT_IP + single space + PROXY_IP + single space + CLIENT_PORT + single space + PROXY_PORT + “\r\n”

开启 Proxy Protocol

第一步,为集群 ProxyProtocolTest  创建一个Proxy Protocol,叫 EnableProxyProtocol

第二步,为 ProxyProtocolTest  激活 EnableProxyProtocol

然后确认开启

可以看到类似下面的字段:

关闭Proxy Protocol

获取客户端IP

开启Proxy Protocol之后,看看后端如何获取到源IP,这里只看nginx

nginx 从1.5.12 版本开始支持Proxy Protocol ,只需要配置一下就OK了,说说怎么配。

第一部分,在http 里面配置如下:

表示把来在172.0.0.0/8 段(TCP负载均衡器的IP段)的所有请求的来源地址,都改成 $proxy_protocol_addr,并且记录在 $remote_addr 变量里。

这是日志格式。

第二部分,在server里面linsten的时候开启 proxy_protocol

此时我请求的时候,日志刷出来了,这里可以看到 $proxy_protocol_addr  和 $remote_addr  都是客户端源IP。

202.134.72.73 202.134.72.73 – – [09/Oct/2014:08:00:12 -0400] “GET / HTTP/1.1″ 200 0 “-” “curl/7.30.0″ “-” “-” “0.000” “-” “-“

参考:https://gist.github.com/pablitoc/91c40d820f207879969c

http://docs.aws.amazon.com/zh_cn/ElasticLoadBalancing/latest/DeveloperGuide/enable-proxy-protocol.html

  • 版权声明: 本文源自互联网, 于2年前,由整理发表,共 1534字。
  • 原文链接:点此查看原文

发表评论

:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen:

目前评论:3   其中:访客  3   博主  0

  1. 小霸 1

    长点时间的ajax一直报504错误怎么解决?

    • 默北 5

      @小霸 查看日志,超时了

      • 小霸 1

        @默北 增加keepAliveTimeOut的时间就好了,thx