在Linux中打開了太多文件(Too many open files)的三種解決方法

回答一、
[root@lxadmin nginx]# cat /proc/sys/fs/file-max
8192
文件系統(tǒng)最大可打開文件數(shù)
[root@lxadmin nginx]# ulimit -n
1024
程序限制只能打開1024個(gè)文件
使用[root@lxadmin nginx]# ulimit -n 8192調(diào)整一下
或者永久調(diào)整打開文件數(shù) 可在啟動(dòng)文件/etc/rc.d/rc.local末尾添加(在/etc/sysctl.conf末尾添加fs.file-max=xxx無(wú)效)
ulimit -n 8192
回答二、
Linux內(nèi)核有時(shí)會(huì)報(bào)告“Too many open files”,起因是file-max默認(rèn)值(8096)太小。要解決這個(gè)問(wèn)題,可以root身份執(zhí)行下列命令(或?qū)⑺鼈兗尤?etc/rcS.d/*下的init腳本。)
# echo "65536" > /proc/sys/fs/file-max # 適用于2.2和2.4版內(nèi)核
# echo "131072" > /proc/sys/fs/inode-max # 僅適用于2.2版內(nèi)核
回答三、
辦法是修改操作系統(tǒng)的打開文件數(shù)量限制,方法如下:
1. 按照最大打開文件數(shù)量的需求設(shè)置系統(tǒng), 并且通過(guò)檢查/proc/sys/fs/file-max文件來(lái)確認(rèn)最大打開文件數(shù)已經(jīng)被正確設(shè)置。
# cat /proc/sys/fs/file-max
如果設(shè)置值太小, 修改文件/etc/sysctl.conf的變量到合適的值。 這樣會(huì)在每次重啟之后生效。 如果設(shè)置值夠大,跳過(guò)下步。
# echo 2048 > /proc/sys/fs/file-max
編輯文件/etc/sysctl.conf,插入下行。
fs.file-max = 8192
2. 在/etc/security/limits.conf文件中設(shè)置最大打開文件數(shù), 下面是一行提示:
#
添加如下這行。
* - nofile 8192
這行設(shè)置了每個(gè)用戶的默認(rèn)打開文件數(shù)為2048。 注意"nofile"項(xiàng)有兩個(gè)可能的限制措施。就是項(xiàng)下的hard和soft。 要使修改過(guò)得最大打開文件數(shù)生效,必須對(duì)這兩種限制進(jìn)行設(shè)定。 如果使用"-"字符設(shè)定, 則hard和soft設(shè)定會(huì)同時(shí)被設(shè)定。
硬限制表明soft限制中所能設(shè)定的最大值。 soft限制指的是當(dāng)前系統(tǒng)生效的設(shè)置值。 hard限制值可以被普通用戶降低。但是不能增加。 soft限制不能設(shè)置的比hard限制更高。 只有root用戶才能夠增加hard限制值。
當(dāng)增加文件限制描述,可以簡(jiǎn)單的把當(dāng)前值雙倍。 例子如下, 如果你要提高默認(rèn)值1024, 最好提高到2048, 如果還要繼續(xù)增加, 就需要設(shè)置成4096。
另外一種情況是在創(chuàng)建索引的時(shí)候,也有兩種可能,一種是 合并因子太小,導(dǎo)致創(chuàng)建文件數(shù)量超過(guò)操作系統(tǒng)限制,這時(shí)可以修改合并因子,也可以修改操作系統(tǒng)的打開文件數(shù)限制;另外一種是合并因子受虛擬機(jī)內(nèi)存的限制,無(wú)法調(diào)整到更大,而 需要索引的doc 數(shù)量又非常的大,這個(gè)時(shí)候就只能通過(guò)修改操作系統(tǒng)的打開文件數(shù)限制來(lái)解決了。
在此基礎(chǔ)上,我還修改了以下一個(gè)配置文件
vi /etc/sysctl.conf
添加:
# Decrease the time default value for tcp_fin_timeout connection
net.ipv4.tcp_fin_timeout = 30
# Decrease the time default value for tcp_keepalive_time connection
net.ipv4.tcp_keepalive_time = 1800
# Turn off tcp_window_scaling
net.ipv4.tcp_window_scaling = 0
# Turn off the tcp_sack
net.ipv4.tcp_sack = 0
#Turn off tcp_timestamps
net.ipv4.tcp_timestamps = 0
然后 service network restart,這些都和TCP sockets有關(guān)的優(yōu)化。
另外需要在 /etc/rc.d/rc.local里添加已使得重啟的時(shí)候生效。
echo "30">/proc/sys/net/ipv4/tcp_fin_timeout
echo "1800">/proc/sys/net/ipv4/tcp_keepalive_time
echo "0">/proc/sys/net/ipv4/tcp_window_scaling
echo "0">/proc/sys/net/ipv4/tcp_sack
echo "0">/proc/sys/net/ipv4/tcp_timestamps
因?yàn)椴皇撬械某绦蚨荚趓oot下跑的,所有l(wèi)inux有對(duì)hard 與soft open files 的區(qū)分,普通用戶受hard的限制,無(wú)論ulimit -n $數(shù)值調(diào)到多高,都跑不到 /etc/security/limits.conf里nofile的值.
這樣的優(yōu)化后 lsof -p $java_pid|wc -l可以跑到4千以上都不會(huì)拋出too many open files。謝謝閱讀,希望能幫到大家,請(qǐng)繼續(xù)關(guān)注腳本之家,我們會(huì)努力分享更多優(yōu)秀的文章。
相關(guān)文章
Fedora Linux 42 穩(wěn)定版發(fā)布: 帶來(lái)大量新功能和軟件更新
Fedora 42昨日發(fā)布,這是 Red Hat 贊助開發(fā)的杰出前沿 Linux 發(fā)行版的最新版,包含大量新功能和軟件更新,使其成為 2025 年上半年發(fā)布的一款出色的 Linux 操作系統(tǒng)之一,內(nèi)2025-04-16如何在Linux查看硬盤信息? 查看Linux硬盤大小類型和硬件信息的5種方法
使用Linux系統(tǒng)的過(guò)程中,查看和了解硬盤信息是非常重要的工作,尤其是對(duì)于系統(tǒng)管理員而言,那么在Linux系統(tǒng)中如何查看硬盤信息?以下是具體內(nèi)容介紹2025-03-12如何在 Linux 中查看 CPU 詳細(xì)信息? 3招輕松查看CPU型號(hào)、核心數(shù)和溫度
在日常運(yùn)維工作中,獲取 CPU 信息是系統(tǒng)運(yùn)維管理員常見的工作內(nèi)容,無(wú)論是為了性能調(diào)優(yōu)、硬件升級(jí)還是僅僅滿足好奇心2025-03-11什么是 Arch Linux? 獨(dú)樹一幟的Arch Linux發(fā)行版分析
Arch Linux是為簡(jiǎn)化,優(yōu)化,現(xiàn)代化,實(shí)用主義,用戶中心和多功能性而創(chuàng)建Linux發(fā)行版,究竟是什么讓 Arch 與眾不同?下面我們就來(lái)簡(jiǎn)要解讀2025-02-19如何在Linux環(huán)境下制作 Win11裝機(jī)U盤?
一直用的linux辦公,想要將筆記本電腦從 Linux 系統(tǒng)切換回 Windows 11,我們可以制作一個(gè)win11裝機(jī)u盤,詳細(xì)如下2025-02-17Rsnapshot怎么用? 基于Rsync的強(qiáng)大Linux備份工具使用指南
Rsnapshot 不僅可以備份本地文件,還能通過(guò) SSH 備份遠(yuǎn)程文件,接下來(lái)詳細(xì)介紹如何安裝、配置和使用 Rsnapshot,包括創(chuàng)建每小時(shí)、每天、每周和每月的本地備份,以及如何進(jìn)2025-02-06Linux Kernel 6.13發(fā)布:附更新內(nèi)容及新特性解讀
Linux 內(nèi)核 6.13 正式發(fā)布,新版本引入了惰性搶占支持,簡(jiǎn)化內(nèi)核搶占邏輯,通過(guò)減少與調(diào)度器相關(guān)的調(diào)用次數(shù),讓內(nèi)核在運(yùn)行時(shí)表現(xiàn)更優(yōu),從而提高效率2025-01-23五大特性引領(lǐng)創(chuàng)新! 深度操作系統(tǒng) deepin 25 Preview預(yù)覽版發(fā)布
今日,深度操作系統(tǒng)正式推出deepin 25 Preview版本,該版本集成了五大核心特性:磐石系統(tǒng)、全新DDE、Treeland窗口合成器、AI For OS以及Distrobox子系統(tǒng)2025-01-18Linux Mint Xia 22.1重磅發(fā)布: 重要更新一覽
Beta 版 Linux Mint“Xia” 22.1 發(fā)布,新版本基于 Ubuntu 24.04,內(nèi)核版本為 Linux 6.8,這次更新帶來(lái)了諸多優(yōu)化和改進(jìn),進(jìn)一步鞏固了 Mint 在 Linux 桌面操作系統(tǒng)領(lǐng)域的2025-01-16LinuxMint怎么安裝? Linux Mint22下載安裝圖文教程
Linux Mint22發(fā)布以后,有很多新功能,很多朋友想要下載并安裝,該怎么操作呢?下面我們就來(lái)看看詳細(xì)安裝指南2025-01-16