共计 2782 个字符，预计需要花费 7 分钟才能阅读完成。
一、问题发现
刚刚上线的项目，前端使用的 LVS+Haproxy 做的负载均衡，支持高并发访问量，但是支撑一段时间后总是出问题，查看日志，发现有如下 Too many open files 的问题。
May 12, 2017 12:49:20 AM org.apache.tomcat.util.net.JIoEndpoint$Acceptor run SEVERE: Socket accept failed java.net.SocketException: Too many open files at java.net.PlainSocketImpl.socketAccept(Native Method) at java.net.AbstractPlainSocketImpl.accept(AbstractPlainSocketImpl.java:398) at java.net.ServerSocket.implAccept(ServerSocket.java:530) at java.net.ServerSocket.accept(ServerSocket.java:498) at org.apache.tomcat.util.net.DefaultServerSocketFactory.acceptSocket(DefaultServerSocketFactory.java:60) at org.apache.tomcat.util.net.JIoEndpoint$Acceptor.run(JIoEndpoint.java:222) at java.lang.Thread.run(Thread.java:745)二、最大文件打开数描述
1、首先普及几个知识
Linux 下一切都是文件，包括输入输出设备、网络连接、socket、管道等；
与文件打开数最相关的是文件描述符（有的人喜欢称作文件标识符，英文为 file descriptor），文件打开数的实质就是文件描述符的数量；
文件打开数的多少取决于系统种类、内存大小，int（语言关键字，如 C99 的 int）长度（非负整数），以及系统管理员的设定；
最大文件打开数是针对一个进程而言，即一个进程能打开的文件句柄数目是有限的，不能超过最大文件打开数；
ulimit 命令只对当前 shell 有效，因此在编写 Shell 脚本时，如果需要并能控制文件最大打开数，则先执行“ulimit -n 文件打开数”命令，在去执行下面的内容；
在 Linux 中被打开的文件描述符存放在 /proc/PID/fd/，其中 PID 就是 process identifier。
除了需要注意，还需要注意 ulimit -v unlimited，最大可用的虚拟内存（The maximum amount of virtual memory available to the shell and, on some systems, to its children）
2、最大文件打开数的全局设置
在 CentOS 和 Ubuntu 中 ulimit 是一个 bash 里面的内置命令，就像 if、shift 一样，并不是一个单独的命令，因此在 Ubuntu 中通常会遇到有人使用 sudo ulimit -n 65535 命令时遇到找不到这个命令的提示（也许是 sudo 的 bug），
ulimit 提供 shell 或者进程可用资源的控制，这些可用资源包括但不限于最大文件打开数、最大可用虚拟内存、最大进程数量、socket buffer 等，它有两种限制等级 hard 和 soft，分别对应的参数开关是 - H 和 -S，hard 限制使得非 root 用户不得增加（超过）设定的值，soft 限制允许非 root 用户增加到 hard 的限制值，通常一般会将 hard 值和 soft 值设置成一个相同的值，命令是 ulimit -HSn 65535。
ulimit 只对当前 shell 有效，要想在任何地方生效，除了先执行 ulimit 命令以外就是更改配置文件，也就是更改最大文件打开数的全局设置，方法是编辑 /etc/security/limits.conf 文件，添加以下两行，重新登录系统生效。
* hard nofile 65535 * soft nofile 65535其中，“*”表示所有用户都生效，重启后，在任何地方执行 ulimit - n 就会显示 65535。
3、一些与文件打开数相关的命令以及其他相关命令
查看当前系统的文件打开总数（Maximum number of opened files）：cat /proc/sys/fs/file-max
查看当前进程的文件打开数：lsof -p 16075 | wc –l
查看当前端口的文件打开数：lsof -i:80 | wc -l
在使用 lsof 之前需要注意，lsof 不适合查看一个连接数很高或者数量动态变化过快的进程或端口
查看某个进程使用的文件：lsof -p 16075
查看某个端口使用的文件：lsof -i:80
查看使用某个文件的用户和程序：fuser -v /bin/bash
三、注意事项
1、使用 ulimit -n 65535 可以立刻生效，但是重新登录之后会恢复成系统初始设置 1024。
2、也可以在 /etc/profile 的最后配置 ulimit -n 65535，使其生效。
构建高可用集群 Keepalived+Haproxy 负载均衡 http://www.linuxidc.com/Linux/2016-12/138917.htm
HAproxy 的基本配置（负载均衡 + 日志独立 + 动静分离 + 读写分离）http://www.linuxidc.com/Linux/2017-03/141614.htm
CentOS 7 下 Keepalived + HAProxy 搭建配置详解 http://www.linuxidc.com/Linux/2017-03/141593.htm
HAproxy 实现反向代理和负载均衡 http://www.linuxidc.com/Linux/2016-12/138749.htm
HAProxy+Keepalived 实现高可用负载均衡 http://www.linuxidc.com/Linux/2016-06/132225.htm
使用 HAProxy 配置 HTTP 负载均衡器 http://www.linuxidc.com/Linux/2015-01/112487.htm
Ubuntu 16.04 下安装 HAProxy 1.5.11 做 tcp 负载均衡 http://www.linuxidc.com/Linux/2016-06/132689.htm
HAproxy 的详细介绍 ：请点这里
HAproxy 的下载地址 ：请点这里
本文永久更新链接地址 ：http://www.linuxidc.com/Linux/2017-06/145313.htm
