golang實現(xiàn)簡易的分布式系統(tǒng)方法
本文介紹了golang實現(xiàn)簡易的分布式系統(tǒng)方法,分享給大家,具體如下:
功能
- 能夠發(fā)送/接收請求和響應(yīng)
- 能夠連接到集群
- 如果無法連接到群集(如果它是第一個節(jié)點),則可以作為主節(jié)點啟動節(jié)點
- 每個節(jié)點有唯一的標(biāo)識
- 能夠在節(jié)點之間交換json數(shù)據(jù)包
- 接受命令行參數(shù)中的所有信息(將來在我們系統(tǒng)升級時將會很有用)
源碼
package main
import (
"fmt"
"strconv"
"time"
"math/rand"
"net"
"flag"
"strings"
"encoding/json"
)
// 節(jié)點數(shù)據(jù)信息
type NodeInfo struct {
// 節(jié)點ID,通過隨機(jī)數(shù)生成
NodeId int `json:"nodeId"`
// 節(jié)點IP地址
NodeIpAddr string `json:"nodeIpAddr"`
// 節(jié)點端口
Port string `json: "port"`
}
// 將節(jié)點數(shù)據(jù)信息格式化輸出
//NodeInfo:{nodeId: 89423,nodeIpAddr: 127.0.0.1/8,port: 8001}
func (node *NodeInfo) String() string {
return "NodeInfo:{ nodeId:" + strconv.Itoa(node.NodeId) + ",nodeIpAddr:" + node.NodeIpAddr + ",port:" + node.Port + "}"
}
/* 添加一個節(jié)點到集群的一個請求或者響應(yīng)的標(biāo)準(zhǔn)格式 */
type AddToClusterMessage struct {
// 源節(jié)點
Source NodeInfo `json:"source"`
// 目的節(jié)點
Dest NodeInfo `json:"dest"`
// 兩個節(jié)點連接時發(fā)送的消息
Message string `json:"message"`
}
/* Request/Response 信息格式化輸出 */
func (req AddToClusterMessage) String() string {
return "AddToClusterMessage:{\n source:" + req.Source.String() + ",\n dest: " + req.Dest.String() + ",\n message:" + req.Message + " }"
}
// cat vi go
// rm
func main() {
// 解析命令行參數(shù)
makeMasterOnError := flag.Bool("makeMasterOnError", false, "如果IP地址沒有連接到集群中,我們將其作為Master節(jié)點.")
clusterip := flag.String("clusterip", "127.0.0.1:8001", "任何的節(jié)點連接都連接這個IP")
myport := flag.String("myport", "8001", "ip address to run this node on. default is 8001.")
flag.Parse() //解析
fmt.Println(*makeMasterOnError)
fmt.Println(*clusterip)
fmt.Println(*myport)
/* 為節(jié)點生成ID */
rand.Seed(time.Now().UTC().UnixNano()) //種子
myid := rand.Intn(99999999) // 隨機(jī)
//fmt.Println(myid)
// 獲取IP地址
myIp,_ := net.InterfaceAddrs()
fmt.Println(myIp[0])
// 創(chuàng)建NodeInfo結(jié)構(gòu)體對象
me := NodeInfo{NodeId: myid, NodeIpAddr: myIp[0].String(), Port: *myport}
// 輸出結(jié)構(gòu)體數(shù)據(jù)信息
fmt.Println(me.String())
dest := NodeInfo{ NodeId: -1, NodeIpAddr: strings.Split(*clusterip, ":")[0], Port: strings.Split(*clusterip, ":")[1]}
/* 嘗試連接到集群,在已連接的情況下并且向集群發(fā)送請求 */
ableToConnect := connectToCluster(me, dest)
/*
* 監(jiān)聽其他節(jié)點將要加入到集群的請求
*/
if ableToConnect || (!ableToConnect && *makeMasterOnError) {
if *makeMasterOnError {fmt.Println("Will start this node as master.")}
listenOnPort(me)
} else {
fmt.Println("Quitting system. Set makeMasterOnError flag to make the node master.", myid)
}
}
/*
* 這是發(fā)送請求時格式化json包有用的工具
* 這是非常重要的,如果不經(jīng)過數(shù)據(jù)格式化,你最終發(fā)送的將是空白消息
*/
func getAddToClusterMessage(source NodeInfo, dest NodeInfo, message string) (AddToClusterMessage){
return AddToClusterMessage{
Source: NodeInfo{
NodeId: source.NodeId,
NodeIpAddr: source.NodeIpAddr,
Port: source.Port,
},
Dest: NodeInfo{
NodeId: dest.NodeId,
NodeIpAddr: dest.NodeIpAddr,
Port: dest.Port,
},
Message: message,
}
}
func connectToCluster(me NodeInfo, dest NodeInfo) (bool){
/* 連接到socket的相關(guān)細(xì)節(jié)信息 */
connOut, err := net.DialTimeout("tcp", dest.NodeIpAddr + ":" + dest.Port, time.Duration(10) * time.Second)
if err != nil {
if _, ok := err.(net.Error); ok {
fmt.Println("未連接到集群.", me.NodeId)
return false
}
} else {
fmt.Println("連接到集群. 發(fā)送消息到節(jié)點.")
text := "Hi nody.. 請?zhí)砑游业郊?."
requestMessage := getAddToClusterMessage(me, dest, text)
json.NewEncoder(connOut).Encode(&requestMessage)
decoder := json.NewDecoder(connOut)
var responseMessage AddToClusterMessage
decoder.Decode(&responseMessage)
fmt.Println("得到數(shù)據(jù)響應(yīng):\n" + responseMessage.String())
return true
}
return false
}
func listenOnPort(me NodeInfo){
/* 監(jiān)聽即將到來的消息 */
ln, _ := net.Listen("tcp", fmt.Sprint(":" + me.Port))
/* 接受連接 */
for {
connIn, err := ln.Accept()
if err != nil {
if _, ok := err.(net.Error); ok {
fmt.Println("Error received while listening.", me.NodeId)
}
} else {
var requestMessage AddToClusterMessage
json.NewDecoder(connIn).Decode(&requestMessage)
fmt.Println("Got request:\n" + requestMessage.String())
text := "Sure buddy.. too easy.."
responseMessage := getAddToClusterMessage(me, requestMessage.Source, text)
json.NewEncoder(connIn).Encode(&responseMessage)
connIn.Close()
}
}
}
運(yùn)行程序
/Users/liyuechun/go
liyuechun:go yuechunli$ go install main
liyuechun:go yuechunli$ main
My details: NodeInfo:{ nodeId:53163002, nodeIpAddr:127.0.0.1/8, port:8001 }
不能連接到集群. 53163002
Quitting system. Set makeMasterOnError flag to make the node master. 53163002
liyuechun:go yuechunli$
獲取相關(guān)幫助信息
$ ./bin/main -h
liyuechun:go yuechunli$ ./bin/main -h
Usage of ./bin/main:
-clusterip string
ip address of any node to connnect (default "127.0.0.1:8001")
-makeMasterOnError
make this node master if unable to connect to the cluster ip provided.
-myport string
ip address to run this node on. default is 8001. (default "8001")
liyuechun:go yuechunli$
啟動Node1主節(jié)點
$ ./bin/main --makeMasterOnError
liyuechun:go yuechunli$ ./bin/main --makeMasterOnError
My details: NodeInfo:{ nodeId:82381143, nodeIpAddr:127.0.0.1/8, port:8001 }
未連接到集群. 82381143
Will start this node as master.
添加節(jié)點Node2到集群
$ ./bin/main --myport 8002 --clusterip 127.0.0.1:8001
添加節(jié)點Node3到集群
main --myport 8004 --clusterip 127.0.0.1:8001
添加節(jié)點Node4到集群
$ main --myport 8003 --clusterip 127.0.0.1:8002

以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。
相關(guān)文章
Go語言調(diào)用ffmpeg-api實現(xiàn)音頻重采樣
最近對golang處理音視頻很感興趣,對golang音視頻常用庫goav進(jìn)行了一番研究。自己寫了一個wav轉(zhuǎn)采樣率的功能。給大家分享一下,中間遇到了不少坑,解決的過程中還是蠻有意思的,希望大家能喜歡2022-12-12
go slice 數(shù)組和切片使用區(qū)別示例解析
這篇文章主要為大家介紹了go slice 數(shù)組和切片使用區(qū)別示例解析,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2023-01-01
Golang多線程爬蟲高效抓取大量數(shù)據(jù)的利器
Golang多線程爬蟲是一種高效抓取大量數(shù)據(jù)的利器。Golang語言天生支持并發(fā)和多線程,可以輕松實現(xiàn)多線程爬蟲的開發(fā)。通過使用Golang的協(xié)程和通道,可以實現(xiàn)爬蟲的高效并發(fā)抓取、數(shù)據(jù)處理和存儲2023-05-05
GoLand編譯帶有構(gòu)建標(biāo)簽的程序思路詳解
這篇文章主要介紹了GoLand編譯帶有構(gòu)建標(biāo)簽的程序,本文通過實例代碼給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友可以參考下2020-11-11
Go語言中init函數(shù)和defer延遲調(diào)用關(guān)鍵詞詳解
這篇文章主要介紹了Go語言中init函數(shù)和defer延遲調(diào)用關(guān)鍵詞,本文給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友可以參考下2023-03-03
重學(xué)Go語言之基礎(chǔ)數(shù)據(jù)類型詳解
Go語言有非常強(qiáng)大的數(shù)據(jù)類型系統(tǒng),其支持的數(shù)據(jù)類型大體上可分為四類:基礎(chǔ)數(shù)據(jù)類型、引用數(shù)據(jù)類型、接口類型、復(fù)合類型。本文就來講講它們各自的用法吧2023-02-02
一文帶你了解Go語言fmt標(biāo)準(zhǔn)庫輸出函數(shù)的使用
這篇文章主要為大家詳細(xì)介紹了Go語言中 fmt 標(biāo)準(zhǔn)庫輸出函數(shù)的使用,文中的示例代碼講解詳細(xì),感興趣的小伙伴可以跟隨小編一起了解一下2022-12-12
golang判斷chan channel是否關(guān)閉的方法
這篇文章主要介紹了golang判斷chan channel是否關(guān)閉的方法,結(jié)合實例形式對比分析了Go語言判斷chan沒有關(guān)閉的后果及關(guān)閉的方法,需要的朋友可以參考下2016-07-07

