在將監控日志的服務獨立部署后,還是發現CPU會在不特定時間段(例如21~22、23~02等)飆到70%,內存也是一路飆升不會下降,明顯是出現了內存泄漏。
:-: 

  需要進一步做優化,于是開通了阿里云的?[Node.js 性能平臺](https://help.aliyun.com/document_detail/60338.html?spm=a2c4g.11186623.6.548.5009feaa1Xb6kQ)。
## 一、Node.js性能平臺
  要使用此工具需要在自己的服務器中安裝些組件的,具體步驟參考[官網說明](https://help.aliyun.com/document_detail/60338.html?spm=a2c4g.11186623.6.548.46b922423ERztM),公司運維操作起來蠻快的,下圖是平臺中的數據趨勢。
:-: 
  點擊堆快照,就會生成一個\*.heapsnapshot文件,通過該文件就能查看內存的分布和使用情況,點擊下圖中的轉儲就能查看分析了。
:-: 
  但是我怎么點,每次都是失敗,后面找了阿里云的技術人員,他說是因為文件太大,下載的時候總是會斷開,無奈,只能在服務器上手動下載,然后在本地Chrome中加載了。
## 二、分析
  在該平臺上下載了堆快照(\*.heapsnapshot文件),在Chrome的Memory選項卡中載入,可以看到下圖內容。
:-: 
**1)任務隊列(Kue.js)**
  翻看其中的幾列,發現內存中滯留了很多隊列任務的數據,于是鎖定內存暴漲與隊列有關。
  然后開始查代碼,并且在本地做了調試,發現在任務完成后沒有將其標記為成功,因為聲明的那個改變狀態的函數沒有被執行。
  只有標記成功的任務才會被自動清除,由于狀態沒有更新,導致滯留在內存中,從而使得內存一直在漲而不會降。
  一頓操作猛如虎,但是最后發布上去后,內存并沒有降下來,依然在增長中,說明不是這個問題。
  在創建隊列任務時會打條日志,然后在完成任務后,會再打一條日志,發現一分鐘內會創建大約4、5百個任務,但是完成的任務只有200個,甚至更少。
  也就是出隊的速度沒有入隊快,隊列來不及處理任務。如此下去的話,就會將任務堆積在一起。
  馬上為隊列處理的方法加了個并發的參數,再用[LoadTest](https://github.com/alexfernandez/loadtest)模擬并發,效果非常理想,任務有條不紊地被處理了,于是發布了代碼。
  若要結束并發測試,mac電腦可執行命令 kill -USR2 36155,其中 36155 是端口號。
:-: 
  但高興的還是太早,雖然為隊列加了并發的設置,但滯留的任務并沒有減少,猜想可能是任務中的邏輯阻塞了任務的完成,繼續將耗時邏輯注釋掉,內存并沒有如預期那樣降下來。
  再次分析,感覺是上面配置的并發沒有生效,很奇怪,查看[Kue.js](https://github.com/Automattic/kue)源碼也沒看出個所以然來。
  只能另辟蹊徑了,也就是多創建幾種類型,但處理的邏輯是一樣的,以此來彌補任務隊列的吞吐量。
~~~
for (let i = 1; i <= 3; i++) {
const taskName = "handleMonitor" + i;
queue.process(taskName, (job, done) => {
services.common
.handleMonitor(job.data.monitor)
.then(() => {
done();
})
.catch((err) => {
done(err);
});
});
}
~~~
  查看日志,發現隊列的入和出已經平衡,但是內存仍然會升,沒有降的趨勢。
**2)繼續分析**
  再次觀察堆快照,我一度懷疑是[Sequelize](https://github.com/sequelize/sequelize/)、[KOA](https://github.com/koajs/koa)或 Node.js 8.0版本的問題,翻來覆去的查,雖然的確看到了內存泄漏的蛛絲馬跡,但仍然沒有起色。
  后面將兩份堆快照做對比,在查看增長的數據時,發現我請求的 ma.gif 路徑中的變量不會釋放,存在著一個閉包,八成是這個原因導致內存一直漲。
:-: 
  于是仔細查看代碼,將最可疑的一句代碼注釋掉,如下所示,省略了其他邏輯,就放出了關鍵的那句代碼,為外部的 queue 對象反復注冊了一個error事件。
~~~
import queue from "../util/queue";
router.get("/ma.gif", async (ctx) => {
queue.on('error', function( err ) {
logger.trace('handleMonitor queue error', err);
});
});
~~~
  沒想到內存一下子平穩了,沒有出現暴增的情況。一波多折后發現,原來是自己寫的代碼不對導致內存的泄漏。
:-: 
**參考資料:**
[Node.js 內存管理和 V8 垃圾回收機制](https://cnodejs.org/topic/5d1cb1ee2beced2efd51f3c7)
[Loadtest庫做負載測試](https://segmentfault.com/a/1190000019961682)
[Memory Usage Bug](https://github.com/sequelize/sequelize/issues/9276)
[4類 JavaScript 內存泄漏及如何避免](https://jinlong.github.io/2016/05/01/4-Types-of-Memory-Leaks-in-JavaScript-and-How-to-Get-Rid-Of-Them/)
[Node.js 調試指南](http://codingsky.com/b/node-in-debugging/590326559.html)
[有意思的 Node.js 內存泄漏問題](https://cloud.tencent.com/developer/article/1683960)
*****
> 原文出處:
[博客園-從零開始搞系列](https://www.cnblogs.com/strick/category/1928903.html)
已建立一個微信前端交流群,如要進群,請先加微信號freedom20180706或掃描下面的二維碼,請求中需注明“看云加群”,在通過請求后就會把你拉進來。還搜集整理了一套[面試資料](https://github.com/pwstrick/daily),歡迎閱讀。

推薦一款前端監控腳本:[shin-monitor](https://github.com/pwstrick/shin-monitor),不僅能監控前端的錯誤、通信、打印等行為,還能計算各類性能參數,包括 FMP、LCP、FP 等。
- ES6
- 1、let和const
- 2、擴展運算符和剩余參數
- 3、解構
- 4、模板字面量
- 5、對象字面量的擴展
- 6、Symbol
- 7、代碼模塊化
- 8、數字
- 9、字符串
- 10、正則表達式
- 11、對象
- 12、數組
- 13、類型化數組
- 14、函數
- 15、箭頭函數和尾調用優化
- 16、Set
- 17、Map
- 18、迭代器
- 19、生成器
- 20、類
- 21、類的繼承
- 22、Promise
- 23、Promise的靜態方法和應用
- 24、代理和反射
- HTML
- 1、SVG
- 2、WebRTC基礎實踐
- 3、WebRTC視頻通話
- 4、Web音視頻基礎
- CSS進階
- 1、CSS基礎拾遺
- 2、偽類和偽元素
- 3、CSS屬性拾遺
- 4、浮動形狀
- 5、漸變
- 6、濾鏡
- 7、合成
- 8、裁剪和遮罩
- 9、網格布局
- 10、CSS方法論
- 11、管理后臺響應式改造
- React
- 1、函數式編程
- 2、JSX
- 3、組件
- 4、生命周期
- 5、React和DOM
- 6、事件
- 7、表單
- 8、樣式
- 9、組件通信
- 10、高階組件
- 11、Redux基礎
- 12、Redux中間件
- 13、React Router
- 14、測試框架
- 15、React Hooks
- 16、React源碼分析
- 利器
- 1、npm
- 2、Babel
- 3、webpack基礎
- 4、webpack進階
- 5、Git
- 6、Fiddler
- 7、自制腳手架
- 8、VSCode插件研發
- 9、WebView中的頁面調試方法
- Vue.js
- 1、數據綁定
- 2、指令
- 3、樣式和表單
- 4、組件
- 5、組件通信
- 6、內容分發
- 7、渲染函數和JSX
- 8、Vue Router
- 9、Vuex
- TypeScript
- 1、數據類型
- 2、接口
- 3、類
- 4、泛型
- 5、類型兼容性
- 6、高級類型
- 7、命名空間
- 8、裝飾器
- Node.js
- 1、Buffer、流和EventEmitter
- 2、文件系統和網絡
- 3、命令行工具
- 4、自建前端監控系統
- 5、定時任務的調試
- 6、自制短鏈系統
- 7、定時任務的進化史
- 8、通用接口
- 9、微前端實踐
- 10、接口日志查詢
- 11、E2E測試
- 12、BFF
- 13、MySQL歸檔
- 14、壓力測試
- 15、活動規則引擎
- 16、活動配置化
- 17、UmiJS版本升級
- 18、半吊子的可視化搭建系統
- 19、KOA源碼分析(上)
- 20、KOA源碼分析(下)
- 21、花10分鐘入門Node.js
- 22、Node環境升級日志
- 23、Worker threads
- 24、低代碼
- 25、Web自動化測試
- 26、接口攔截和頁面回放實驗
- 27、接口管理
- 28、Cypress自動化測試實踐
- 29、基于Electron的開播助手
- Node.js精進
- 1、模塊化
- 2、異步編程
- 3、流
- 4、事件觸發器
- 5、HTTP
- 6、文件
- 7、日志
- 8、錯誤處理
- 9、性能監控(上)
- 10、性能監控(下)
- 11、Socket.IO
- 12、ElasticSearch
- 監控系統
- 1、SDK
- 2、存儲和分析
- 3、性能監控
- 4、內存泄漏
- 5、小程序
- 6、較長的白屏時間
- 7、頁面奔潰
- 8、shin-monitor源碼分析
- 前端性能精進
- 1、優化方法論之測量
- 2、優化方法論之分析
- 3、瀏覽器之圖像
- 4、瀏覽器之呈現
- 5、瀏覽器之JavaScript
- 6、網絡
- 7、構建
- 前端體驗優化
- 1、概述
- 2、基建
- 3、后端
- 4、數據
- 5、后臺
- Web優化
- 1、CSS優化
- 2、JavaScript優化
- 3、圖像和網絡
- 4、用戶體驗和工具
- 5、網站優化
- 6、優化閉環實踐
- 數據結構與算法
- 1、鏈表
- 2、棧、隊列、散列表和位運算
- 3、二叉樹
- 4、二分查找
- 5、回溯算法
- 6、貪心算法
- 7、分治算法
- 8、動態規劃
- 程序員之路
- 大學
- 2011年
- 2012年
- 2013年
- 2014年
- 項目反思
- 前端基礎學習分享
- 2015年
- 再一次項目反思
- 然并卵
- PC網站CSS分享
- 2016年
- 制造自己的榫卯
- PrimusUI
- 2017年
- 工匠精神
- 2018年
- 2019年
- 前端學習之路分享
- 2020年
- 2021年
- 2022年
- 2023年
- 2024年
- 日志
- 2020