問題:
comet節點掛掉,zookeeper的node不能自動刪除。
解決辦法:在web模塊,通過rpc 調用 comet Ping() 方法,返回err則刪除該節點
安全驗證
實現:在web模塊開啟http服務,通過rpc調用comet New()方法
創建token:
comet->rpc.go->New()
添加 token 接口
在瀏覽器中打開:
http://localhost:8090/1/token/add?k=Terry-Mao&t=0
成功返回:
{"ret":0}
多個web服務:通過Nginx轉發。
多個message服務:web模塊獲取message rpc 鏈接是隨機的,redis地址是一致的。
多個comet服務:先根據用戶的key通過http請求web獲取連接節點,然后再根據對應的節點創建長連接。
http://localhost:8090/1/server/get?k=Terry-Mao&p=2 (參數p=1 websocket,p=2 tcp)
web需要修改的配置:
http.bind localhost:8090 # ip:端口
admin.bind localhost:8091 # ip:端口
[zookeeper]
addr localhost:2181 # zkip:端口
comet.path /gopush-cluster-comet # zk comet path(與comet配置一致)
message.path /gopush-cluster-message # zk message path(與message配置一致)
migrate.path /gopush-migrate-lock # zk migrate path
message需要修改的配置:
rpc.bind localhost:9989 # ip:端口(多個用,隔開)
node.weight 2 #權重
[redis.source]
node2:2 tcp@localhost:6379 # 節點名:權重 redis地址
[zookeeper]
addr localhost:2181 # zkip:端口
message.path /gopush-cluster-message # zk message path(與web配置一致)
comet需要修改的配置:
websocket.bind localhost:6968 # 多個用,隔開
tcp.bind localhost:6969 # 多個用,隔開
rpc.bind localhost:6970 # ip:端口(多個用,隔開)
[zookeeper]
comet.path /gopush-cluster-comet # zk comet path(與web配置一致)
comet.node node1 # 節點名稱 唯一
comet.weight 1 # 權重 大于0
message.path /gopush-cluster-message # zk message path(與web配置一致)
addr localhost:2181 # zkip:端口
cometRing *ketama.HashRing
type HashRing struct {
defaultSpots int
ticks tickArray
length int
}
type tickArray []node
type node struct {
node string
hash uint
}
添加、刪除comet節點
1.更新替換 cometNodeInfoMap、cometRing
2.rpc 到 comet 從刪除 ChannelBucket.Data 不屬于本節點的 key ,關閉key對應的鏈接Channel , 更新替換 CometRing、nodeWeightMap。
cometRing:是一個node的切片數組
每個comet的cometRing都是一致的,判斷該用戶是否屬于該node,通過key獲取node與Conf.ZookeeperCometNode比較(Conf.ZookeeperCometNode != node)來判斷。
MessageRPC:
comet和web模塊:
啟動程序 調用 myrpc.MessageRPC 的 init() 函數初始化 MessageRPC
go watchMessageRoot() 監聽節點變化
go handleMessageNodeEvent() 當節點有變化更新 MessageRPC
用二分法 隨機獲取 Message 節點鏈接
權重分配算法,將所有節點權重累加,然后每個節點的權重(除)/權重之和,生成一個節點對應的隨機數。
comet模塊
通過 go watchMessageRoot() 和 go handleMessageNodeEvent() 獲取 message的信息保存到 MessageRPC 中。并監聽節點變化
web模塊
通過 go watchMessageRoot() 和 go handleMessageNodeEvent() 獲取 message的信息保存到 MessageRPC 中。并監聽節點變化
通過 go handleCometNodeEvent() 和 go watchCometRoot() 獲取 comet 的 CometNodeInfo (RpcAddr、TcpAddr、WsAddr、Weight、Rpc)信息保存到 cometNodeInfoMap 中。 并監聽節點變化
redis.source and mysql.source:
用戶的key通過hash算法獲取node,實現根據key來分庫。
如果分庫,redis存儲room keys 信息,根據room Id來分配。
- 序言
- 目錄
- 環境搭建
- Linux搭建golang環境
- Windows搭建golang環境
- Mac搭建golang環境
- 介紹
- 1.Go語言的主要特征
- 2.golang內置類型和函數
- 3.init函數和main函數
- 4.包
- 1.工作空間
- 2.源文件
- 3.包結構
- 4.文檔
- 5.編寫 Hello World
- 6.Go語言 “ _ ”(下劃線)
- 7.運算符
- 8.命令
- 類型
- 1.變量
- 2.常量
- 3.基本類型
- 1.基本類型介紹
- 2.字符串String
- 3.數組Array
- 4.類型轉換
- 4.引用類型
- 1.引用類型介紹
- 2.切片Slice
- 3.容器Map
- 4.管道Channel
- 5.指針
- 6.自定義類型Struct
- 編碼格式轉換
- 流程控制
- 1.條件語句(if)
- 2.條件語句 (switch)
- 3.條件語句 (select)
- 4.循環語句 (for)
- 5.循環語句 (range)
- 6.循環控制Goto、Break、Continue
- 函數
- 1.函數定義
- 2.參數
- 3.返回值
- 4.匿名函數
- 5.閉包、遞歸
- 6.延遲調用 (defer)
- 7.異常處理
- 8.單元測試
- 壓力測試
- 方法
- 1.方法定義
- 2.匿名字段
- 3.方法集
- 4.表達式
- 5.自定義error
- 接口
- 1.接口定義
- 2.執行機制
- 3.接口轉換
- 4.接口技巧
- 面向對象特性
- 并發
- 1.并發介紹
- 2.Goroutine
- 3.Chan
- 4.WaitGroup
- 5.Context
- 應用
- 反射reflection
- 1.獲取基本類型
- 2.獲取結構體
- 3.Elem反射操作基本類型
- 4.反射調用結構體方法
- 5.Elem反射操作結構體
- 6.Elem反射獲取tag
- 7.應用
- json協議
- 1.結構體轉json
- 2.map轉json
- 3.int轉json
- 4.slice轉json
- 5.json反序列化為結構體
- 6.json反序列化為map
- 終端讀取
- 1.鍵盤(控制臺)輸入fmt
- 2.命令行參數os.Args
- 3.命令行參數flag
- 文件操作
- 1.文件創建
- 2.文件寫入
- 3.文件讀取
- 4.文件刪除
- 5.壓縮文件讀寫
- 6.判斷文件或文件夾是否存在
- 7.從一個文件拷貝到另一個文件
- 8.寫入內容到Excel
- 9.日志(log)文件
- server服務
- 1.服務端
- 2.客戶端
- 3.tcp獲取網頁數據
- 4.http初識-瀏覽器訪問服務器
- 5.客戶端訪問服務器
- 6.訪問延遲處理
- 7.form表單提交
- web模板
- 1.渲染終端
- 2.渲染瀏覽器
- 3.渲染存儲文件
- 4.自定義io.Writer渲染
- 5.模板語法
- 時間處理
- 1.格式化
- 2.運行時間
- 3.定時器
- 鎖機制
- 互斥鎖
- 讀寫鎖
- 性能比較
- sync.Map
- 原子操作
- 1.原子增(減)值
- 2.比較并交換
- 3.導入、導出、交換
- 加密解密
- 1.md5
- 2.base64
- 3.sha
- 4.hmac
- 常用算法
- 1.冒泡排序
- 2.選擇排序
- 3.快速排序
- 4.插入排序
- 5.睡眠排序
- 設計模式
- 創建型模式
- 單例模式
- 抽象工廠模式
- 工廠方法模式
- 原型模式
- 結構型模式
- 適配器模式
- 橋接模式
- 合成/組合模式
- 裝飾模式
- 外觀模式
- 享元模式
- 代理模式
- 行為性模式
- 職責鏈模式
- 命令模式
- 解釋器模式
- 迭代器模式
- 中介者模式
- 備忘錄模式
- 觀察者模式
- 狀態模式
- 策略模式
- 模板模式
- 訪問者模式
- 數據庫操作
- golang操作MySQL
- 1.mysql使用
- 2.insert操作
- 3.select 操作
- 4.update 操作
- 5.delete 操作
- 6.MySQL事務
- golang操作Redis
- 1.redis介紹
- 2.golang鏈接redis
- 3.String類型 Set、Get操作
- 4.String 批量操作
- 5.設置過期時間
- 6.list隊列操作
- 7.Hash表
- 8.Redis連接池
- golang操作ETCD
- 1.etcd介紹
- 2.鏈接etcd
- 3.etcd存取
- 4.etcd監聽Watch
- golang操作kafka
- 1.kafka介紹
- 2.寫入kafka
- 3.kafka消費
- golang操作ElasticSearch
- 1.ElasticSearch介紹
- 2.kibana介紹
- 3.寫入ElasticSearch
- NSQ
- 安裝
- 生產者
- 消費者
- beego框架
- 1.beego框架環境搭建
- 2.參數配置
- 1.默認參數
- 2.自定義配置
- 3.config包使用
- 3.路由設置
- 1.自動匹配
- 2.固定路由
- 3.正則路由
- 4.注解路由
- 5.namespace
- 4.多種數據格式輸出
- 1.直接輸出字符串
- 2.模板數據輸出
- 3.json格式數據輸出
- 4.xml格式數據輸出
- 5.jsonp調用
- 5.模板處理
- 1.模板語法
- 2.基本函數
- 3.模板函數
- 6.請求處理
- 1.GET請求
- 2.POST請求
- 3.文件上傳
- 7.表單驗證
- 1.表單驗證
- 2.定制錯誤信息
- 3.struct tag 驗證
- 4.XSRF過濾
- 8.靜態文件處理
- 1.layout設計
- 9.日志處理
- 1.日志處理
- 2.logs 模塊
- 10.會話控制
- 1.會話控制
- 2.session 包使用
- 11.ORM 使用
- 1.鏈接數據庫
- 2. CRUD 操作
- 3.原生 SQL 操作
- 4.構造查詢
- 5.事務處理
- 6.自動建表
- 12.beego 驗證碼
- 1.驗證碼插件
- 2.驗證碼使用
- beego admin
- 1.admin安裝
- 2.admin開發
- beego 熱升級
- gin框架
- 安裝使用
- 項目
- 秒殺項目
- 日志收集
- 面試題
- 面試題一
- 面試題二
- 錯題集
- Go語言陷阱和常見錯誤
- 常見語法錯誤
- 初級
- 中級
- 高級
- Go高級應用
- goim
- goim 啟動流程
- goim 工作流程
- goim 結構體
- gopush
- gopush工作流程
- gopush啟動流程
- gopush業務流程
- gopush應用
- gopush新添功能
- rpc
- HTTP RPC
- TCP RPC
- JSON RPC
- 常見RPC開源框架
- pprof
- pprof介紹
- pprof應用
- 封裝 websocket
- zookeeper
- 基本操作測試
- 簡單的分布式server
- Zookeeper命令行使用
- cgo
- Go語言 demo
- 用Go語言計算一個人的年齡,生肖,星座
- 超簡易Go語言實現的留言板代碼
- 信號處理模塊,可用于在線加載配置,配置動態加載的信號為SIGHUP
- 陽歷和陰歷相互轉化的工具類 golang版本
- 錯誤總結