导航:首页 > 文件类型 > linux打开的文件数量

linux打开的文件数量

发布时间:2025-08-02 21:27:57

『壹』 在linux中打开了太多文件Toomanyopenfiles的三种解决方法

回答一、

[root@lxadmin nginx]# cat /proc/sys/fs/file-max
8192
文件系统最大可打开文件数
[root@lxadmin nginx]# ulimit -n
1024
程序限制只能打开1024个文件
使用[root@lxadmin nginx]# ulimit -n 8192调整一下
或者永久调整打开文件数 可在启动文件/etc/rc.d/rc.local末尾添加(在/etc/sysctl.conf末尾添加fs.file-max=xxx无效)

ulimit -n 8192

回答二、

Linux内核有时会报告“Too many open files”,起因是file-max默认值(8096)太小。要解决这个问题,可以root身份执行下列命令(或将它们加入/etc/rcS.d/*下的init脚本。)

# echo "65536" > /proc/sys/fs/file-max # 适用于2.2和2.4版内核
# echo "131072" > /proc/sys/fs/inode-max # 仅适用于2.2版内核

回答三、

办法是修改操作系统的打开文件数量限制,方法如下:

1. 按照最大打开文件数量的需求设置系统, 并且通过检查/proc/sys/fs/file-max文件来确认最大打开文件数已经被正确设置。
# cat /proc/sys/fs/file-max
如果设置值太小, 修改文件/etc/sysctl.conf的变量到合适的值。 这样会在每次重启之后生效。 如果设置值够大,跳过下步。
# echo 2048 > /proc/sys/fs/file-max
编辑文件/etc/sysctl.conf,插入下行。
fs.file-max = 8192

2. 在/etc/security/limits.conf文件中设置最大打开文件数, 下面是一行提示:
#
添加如下这行。
* - nofile 8192

这行设置了每个用户的默认打开文件数为2048。 注意"nofile"项有两个可能的限制措施。就是项下的hard和soft。 要使修改过得最大打开文件数生效,必须对这两种限制进行设定。 如果使用"-"字符设定, 则hard和soft设定会同时被设定。
硬限制表明soft限制中所能设定的最大值。 soft限制指的是当前系统生效的设置值。 hard限制值可以被普通用户降低。但是不能增加。 soft限制不能设置的比hard限制更高。 只有root用户才能够增加hard限制值。
当增加文件限制描述,可以简单的把当前值双倍。 例子如下, 如果你要提高默认值1024, 最好提高到2048, 如果还要继续增加, 就需要设置成4096。

另外一种情况是在创建索引的时候,也有两种可能,一种是 合并因子太小,导致创建文件数量超过操作系统限制,这时可以修改合并因子,也可以修改操作系统的打开文件数限制;另外一种是合并因子受虚拟机内存的限制,无法调整到更大,而 需要索引的doc 数量又非常的大,这个时候就只能通过修改操作系统的打开文件数限制来解决了。

在此基础上,我还修改了以下一个配置文件
vi /etc/sysctl.conf
添加:
# Decrease the time default value for tcp_fin_timeout connection
net.ipv4.tcp_fin_timeout = 30
# Decrease the time default value for tcp_keepalive_time connection
net.ipv4.tcp_keepalive_time = 1800
# Turn off tcp_window_scaling
net.ipv4.tcp_window_scaling = 0
# Turn off the tcp_sack
net.ipv4.tcp_sack = 0
#Turn off tcp_timestamps
net.ipv4.tcp_timestamps = 0
然后 service network restart,这些都和TCP sockets有关的优化。

另外需要在 /etc/rc.d/rc.local里添加已使得重启的时候生效。
echo "30">/proc/sys/net/ipv4/tcp_fin_timeout
echo "1800">/proc/sys/net/ipv4/tcp_keepalive_time
echo "0">/proc/sys/net/ipv4/tcp_window_scaling
echo "0">/proc/sys/net/ipv4/tcp_sack
echo "0">/proc/sys/net/ipv4/tcp_timestamps
因为不是所有的程序都在root下跑的,所有linux有对hard 与soft open files 的区分,普通用户受hard的限制,无论ulimit -n $数值调到多高,都跑不到 /etc/security/limits.conf里nofile的值.

这样的优化后 lsof -p $java_pid|wc -l可以跑到4千以上都不会抛出too many open files。谢谢阅读,希望能帮到大家,请继续关注,我们会努力分享更多优秀的文章。

『贰』 浅谈linux下进程最大数、最大线程数、进程打开的文件数

Linux系统中进程、线程和文件描述符的数量都有其限制。理论上,每个进程在全局段描述表GDT中占用两个表项,使得最大进程数理论上为8180除以2,大约4090个。然而,PID值的限制默认设置为32768,意味着用户创建进程的上限实际是这个值,即使root用户不修改内核参数也只能达到32768个进程。

单个进程的线程数受线程库限制,Linuxthreads限制为1024,NPTL则受限于系统资源,特别是线程栈内存。在Ubuntu-14.04-LTS-64bit系统上,Linuxthreads最多创建381个线程。32位系统中,由于内存限制,实际线程数略少于理论值。

打开文件描述符数(file-max)和nr_open参数控制了系统范围内进程能打开的文件数。默认情况下,file-max为186405,而nr_open则限制了单进程的最大文件数。为了提高上限,可以增大这两个值,但需要注意hard limit和soft limit的关系,以及与inode-max(2.2内核时)的兼容性。

对于非root用户,修改hard limit有限制,需要在/etc/security/limits.conf中永久设置。而nofile参数,尽管可以设置为unlimited,但实际操作中会遇到无法登录的限制,其上限由nr_open决定,通常为1048576。

2.4和2.6内核在处理线程和内存管理上有所不同,2.6内核在高并发场景下表现更好,但需要确保线程安全和内存管理。单进程服务器的并发线程数受内存和ulimit参数影响,64位系统上的具体限制需视硬件配置而定。

总的来说,理解并调整这些限制对于优化Linux系统性能和资源管理至关重要。

『叁』 Linux如何修改文件打开数

操作系统版本:Redhat 5.4
问题背景:Tsung压力测试,想要尽可能多地建立tcp请求,发现每次只能建立1013个请求。
原因分析:Linux默认的文件打开数是1024,减掉其他地方用掉的11个,剩下的就是1013个了。

解决方案:
1)先用ulimit -n或ulimit -a命令,发现文件打开数是1024

复制代码代码如下:
[root@SamuluIndex ~]# ulimit -n
1024

2)用ulimit -n 65535把文件打开数改为最大值65535,再用ulimit -n验证发现修改成功


复制代码代码如下:
[root@SamuluIndex ~]# ulimit -n 65535
[root@SamuluIndex ~]# ulimit -n
65535

此时跑一下tsung start,发现仍然只能建立1013个请求。另外,重新登录后,发现文件打开数重置回默认的1024。说明此方案不通。

3)在/etc/security/limits.conf最后增加如下两行记录


复制代码代码如下:
* soft nofile 65535
* hard nofile 65535

重新验证,成功。

补充资料:

修改linux系统最大打开文件数

当前设置最大打开文件数可以通过如下命令查看。
ulimit -n
这个数字说明了一个普通用户能够在一个单独会话中所能打开最大的文件数目。
注意。如果是root,以下操作不能使ulimit -n的输出增加。因为用户root用户不受这个ulimit限制。只有普通用户才会受这个限制。
为了提高最大打开文件数到默认值1024以上, 需要在系统上修改2个地方。

在这个案例中, 我们将最大打开文件数增加到2048。 所有的步骤需要root用户操作。普通用户需要重新登录才能使设置生效。
1. 按照最大打开文件数量的需求设置系统,并且通过检查/proc/sys/fs/file-max文件来确认最大打开文件数已经被正确设置。
# cat /proc/sys/fs/file-max
如果设置值太小, 修改文件/etc/sysctl.conf的变量到合适的值。 这样会在每次重启之后生效。如果设置值够大,跳过下步。
# echo 2048 > /proc/sys/fs/file-max编辑文件/etc/sysctl.conf,插入下行。
fs.file-max = 2048
2. 在/etc/security/limits.conf文件中设置最大打开文件数, 下面是一行提示:
# 添加如下这行。
* - nofile 2048
这行设置了每个用户的默认打开文件数为2048。
注意"nofile"项有两个可能的限制措施。就是项下的hard和soft。
要使修改过得最大打开文件数生效,必须对这两种限制进行设定。
如果使用"-"字符设定, 则hard和soft设定会同时被设定。
硬限制表明soft限制中所能设定的最大值。
soft限制指的是当前系统生效的设置值。
hard限制值可以被普通用户降低。但是不能增加。
soft限制不能设置的比hard限制更高。
只有root用户才能够增加hard限制值。
当增加文件限制描述,可以简单的把当前值双倍。
例子如下, 如果你要提高默认值1024, 最好提高到2048, 如果还要继续增加, 就需要设置成4096。
3.Add the following line to the /etc/pam.d/login and /etc/pam.d/xdm file, if it does not already exist:
session required /lib/security/pam_limits.so
4. logout and logon
或者在shell配置文件里面动态加载。
如.bashrc里加:
ulimit -HSn 2048

二、安装

tar zxvf mysql-5.1.50-linux-i686-glibc23.tar.gz
cp -rf mysql-5.1.50-linux-i686-glibc23 /usr/local/
cd /usr/local/
mv mysql-5.1.50-linux-i686-glibc23/ mysql
安装为默认的路径,这样就不用为程序目录做软链接了
groupadd mysql
useradd -g mysql mysql
cd mysql/
cp support-files/my-medium.cnf /etc/my.cnf
sed -i 's/log-bin=mysql-bin/#log-bin=mysql-bin/g' /etc/my.cnf
sed -i 's/binlog_format=mixed/#binlog_format=mixed/g' /etc/my.cnf
sed -i 's/skip-locking/skip-locking/nmax_connections = 1000/nwait_timeout = 5/g' /etc/my.cnf
接下来初始化数据库
scripts/mysql_install_db --user=mysql
安装mysql服务控制
cp support-files/mysql.server /etc/rc.d/init.d/mysqld
chmod 755 /etc/rc.d/init.d/mysqld
chkconfig --add mysqld
chkconfig mysqld on
service mysqld start
bin/mysqladmin -u root password 123654

阅读全文

与linux打开的文件数量相关的资料

热点内容
文件王测试视频 浏览:874
易语言图片框显示文件夹的相片 浏览:211
如何通过数据网络发短信 浏览:423
电脑导入u盘文件在哪里 浏览:334
手机文件应用包去哪里找 浏览:350
为什么统计数据尺码不出来 浏览:36
pdf文件没有找到 浏览:273
苹果5如何扫码加入网络 浏览:903
换方向机为什么要编程序 浏览:337
怎么安装苹果app内购项目 浏览:404
苹果下载描述文件点了没有反应 浏览:671
linuxcurl头文件 浏览:45
美区app如何取消订阅 浏览:40
太原编程培训机构哪些比较好 浏览:140
oppor9s如何看网络制式 浏览:386
苹果手机怎么打开微信视频文件 浏览:136
linux打开的文件数量 浏览:546
小米5s如何降低版本 浏览:966
快走丝编程哪个软件好 浏览:227
在线学习编程需要什么条件 浏览:328

友情链接