淺談nodejs中創(chuàng)建cluster
cluster集群
我們知道,nodejs的event loop或者說事件響應處理器是單線程的,但是現(xiàn)在的CPU基本上都是多核的,為了充分利用現(xiàn)代CPU多核的特性,我們可以創(chuàng)建cluster,從而使多個子進程來共享同一個服務(wù)器端口。
也就是說,通過cluster,我們可以使用多個子進程來服務(wù)處理同一個端口的請求。
先看一個簡單的http server中使用cluster的例子:
const cluster = require('cluster'); const http = require('http'); const numCPUs = require('os').cpus().length; if (cluster.isMaster) { console.log(`主進程 ${process.pid} 正在運行`); // 衍生工作進程。 for (let i = 0; i < numCPUs; i++) { cluster.fork(); } cluster.on('exit', (worker, code, signal) => { console.log(`工作進程 ${worker.process.pid} 已退出`); }); } else { // 工作進程可以共享任何 TCP 連接。 // 在本例子中,共享的是 HTTP 服務(wù)器。 http.createServer((req, res) => { res.writeHead(200); res.end('你好世界\n'); }).listen(8000); console.log(`工作進程 ${process.pid} 已啟動`); }
cluster詳解
cluster模塊源自于lib/cluster.js,我們可以通過cluster.fork()來創(chuàng)建子工作進程,用來處理主進程的請求。
cluster中的event
cluster繼承自events.EventEmitter,所以cluster可以發(fā)送和接收event。
cluster支持7中event,分別是disconnect,exit,fork,listening,message,online和setup。
在講解disconnect之前,我們先介紹一個概念叫做IPC,IPC的全稱是Inter-Process Communication,也就是進程間通信。
IPC主要用來進行主進程和子進程之間的通信。一個工作進程在創(chuàng)建后會自動連接到它的主進程。 當 'disconnect' 事件被觸發(fā)時才會斷開連接。
觸發(fā)disconnect事情的原因有很多,可以是主動調(diào)用worker.disconnect(),也可以是工作進程退出或者被kill掉。
cluster.on('disconnect', (worker) => { console.log(`工作進程 #${worker.id} 已斷開連接`); });
exit事件會在任何一個工作進程關(guān)閉的時候觸發(fā)。一般用來監(jiān)測cluster中某一個進程是否異常退出,如果退出的話使用cluster.fork創(chuàng)建新的進程,以保證有足夠多的進程來處理請求。
cluster.on('exit', (worker, code, signal) => { console.log('工作進程 %d 關(guān)閉 (%s). 重啟中...', worker.process.pid, signal || code); cluster.fork(); });
fork事件會在調(diào)用cluster.fork方法的時候被觸發(fā)。
const timeouts = []; function errorMsg() { console.error('連接出錯'); } cluster.on('fork', (worker) => { timeouts[worker.id] = setTimeout(errorMsg, 2000); });
主進程和工作進程的listening事件都會在工作進程調(diào)用listen方法的時候觸發(fā)。
cluster.on('listening', (worker, address) => { console.log( `工作進程已連接到 ${address.address}:${address.port}`); });
其中worker代表的是工作線程,而address中包含三個屬性:address、 port 和 addressType。 其中addressType有四個可選值:
- 4 (TCPv4)
- 6 (TCPv6)
- -1 (Unix 域 socket)
- 'udp4' or 'udp6' (UDP v4 或 v6)
message事件會在主進程收到子進程發(fā)送的消息時候觸發(fā)。
當主進程生成工作進程時會觸發(fā)fork,當工作進程運行時會觸發(fā)online。
setupMaster方法被調(diào)用的時候,會觸發(fā)setup事件。
cluster中的方法
cluster中三個方法,分別是disconnect,fork和setupMaster。
cluster.disconnect([callback])
調(diào)用cluster的disconnect方法,實際上會在cluster中的每個worker中調(diào)用disconnect方法。從而斷開worker和主進程的連接。
當所有的worker都斷開連接之后,會執(zhí)行callback。
cluster.fork([env])
fork方法,會從主進程中創(chuàng)建新的子進程。其中env是要添加到進程環(huán)境變量的鍵值對。
fork將會返回一個cluster.Worker對象,代表工作進程。
最后一個方法是setupMaster:
cluster.setupMaster([settings])
默認情況下,cluster通過fork方法來創(chuàng)建子進程,但是我們可以通過setupMaster來改變這個行為。通過設(shè)置settings變量,我們可以改變后面fork子進程的行為。
我們看一個setupMaster的例子:
const cluster = require('cluster'); cluster.setupMaster({ exec: 'worker.js', args: ['--use', 'https'], silent: true }); cluster.fork(); // https 工作進程 cluster.setupMaster({ exec: 'worker.js', args: ['--use', 'http'] }); cluster.fork(); // http 工作進程
cluster中的屬性
通過cluster對象,我們可以通過isMaster和isWorker來判斷進程是否主進程。
可以通過worker來獲取當前工作進程對象的引用:
const cluster = require('cluster'); if (cluster.isMaster) { console.log('這是主進程'); cluster.fork(); cluster.fork(); } else if (cluster.isWorker) { console.log(`這是工作進程 #${cluster.worker.id}`); }
可以通過workers來遍歷活躍的工作進程對象:
// 遍歷所有工作進程。 function eachWorker(callback) { for (const id in cluster.workers) { callback(cluster.workers[id]); } } eachWorker((worker) => { worker.send('通知所有工作進程'); });
每個worker都有一個id編號,用來定位該worker。
cluster中的worker
worker類中包含了關(guān)于工作進程的所有的公共的信息和方法。cluster.fork出來的就是worker對象。
worker的事件和cluster的很類似,支持6個事件:disconnect,error,exit,listening,message和online。
worker中包含3個屬性,分別是:id,process和exitedAfterDisconnect。
其中id是worker的唯一標記。
worker中的process,實際上是ChildProcess對象,是通過child_process.fork()來創(chuàng)建出來的。
因為在worker中,process屬于全局變量,所以我們可以直接在worker中使用process來進行發(fā)送消息。
exitedAfterDisconnect表示如果工作進程由于 .kill() 或 .disconnect() 而退出的話,值就是true。如果是以其他方式退出的話,返回值就是false。如果工作進程尚未退出,則為 undefined。
我們可以通過worker.exitedAfterDisconnect 來區(qū)分是主動退出還是被動退出,主進程可以根據(jù)這個值決定是否重新生成工作進程。
cluster.on('exit', (worker, code, signal) => { if (worker.exitedAfterDisconnect === true) { console.log('這是自發(fā)退出,無需擔心'); } }); // 殺死工作進程。 worker.kill();
worker還支持6個方法,分別是:send,kill,destroy,disconnect,isConnected,isDead。
這里我們主要講解一下send方法來發(fā)送消息:
worker.send(message[, sendHandle[, options]][, callback])
可以看到send方法和child_process中的send方法參數(shù)其實是很類似的。而本質(zhì)上,worker.send在主進程中,這會發(fā)送消息給特定的工作進程。 相當于 ChildProcess.send()。在工作進程中,這會發(fā)送消息給主進程。 相當于 process.send()。
if (cluster.isMaster) { const worker = cluster.fork(); worker.send('你好'); } else if (cluster.isWorker) { process.on('message', (msg) => { process.send(msg); }); }
在上面的例子中,如果是在主進程中,那么可以使用worker.send來發(fā)送消息。而在子進程中,則可以使用worker中的全局變量process來發(fā)送消息。
總結(jié)
使用cluster可以充分使用多核CPU的優(yōu)勢,希望大家在實際的項目中應用起來。
以上就是淺談nodejs中創(chuàng)建cluster的詳細內(nèi)容,更多關(guān)于nodejs中創(chuàng)建cluster的資料請關(guān)注腳本之家其它相關(guān)文章!
相關(guān)文章
npm?install的--save和--save-dev使用說明(推薦)
這篇文章主要介紹了npm?install的--save和--save-dev使用說明,文中給大家提到了各個命令的區(qū)別及各種安裝參數(shù)的區(qū)別,需要的朋友可以參考下2022-08-08通過實例了解Nodejs模塊系統(tǒng)及require機制
這篇文章主要介紹了通過實例了解Nodejs模塊系統(tǒng)及require機制,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下2020-07-07nodejs npm install全局安裝和本地安裝的區(qū)別
這篇文章主要介紹了nodejs npm install 全局安裝和非全局安裝的區(qū)別,即帶參數(shù)-g和不帶參數(shù)-g安裝的區(qū)別,需要的朋友可以參考下2014-06-06