Tag: rrd

合併 RRD 資料的工具

昨天把跑在 Raspberry Pi 上的 SmokePing 資料改用統一版本 (我在 GitHub 上公開的 smokeping-config.d 這個)，但有些節點的 naming 改變了，所以會需要將資料整在一起。

在透過 Google 搜尋後，用的工具是「A very simple script to merge multiple RRD files, since none of those available seem to work.」這個，是一隻 Python 的程式。另外可以從程式碼裡面看到他使用了 rrdtool 這個 CLI 工具 (SmokePing 用了 RRD 格式儲存資料)，所以使用這隻程式前需要先安裝 rrdtool 這個套件：

$ sudo apt install rrdtool

接下來就是照說明來轉換。由於 rrdtool 這隻程式沒有對 filename 做特殊處理 (i.e. 把 - 當作 stdin)，所以會使用到 /dev/stdin 這種特殊方式來當作 input：

./simple-rrd-merge.py input-a.rrd input-b.rrd | rrdtool restore /dev/stdin output.rrd

當然，要記得先把 SmokePing 停掉再跑會比較好 XD

生出的 RRD 檔案再覆蓋回去 (我是先備份起來，以免有意外...)，然後再把 SmokePing 跑起來就可以了。

Munin 的設定...

Munin 是套資源監視軟體。跟其他資源監視軟體不一樣的地方？畫面漂亮啊 XDDD 拿台堆各種雜物的 database 來看：

Munin screenshot

等到 Munin 監視超過二十台時就會很明顯感覺到很吃資源，再多的時候就會開始罵三字經，罵完後拆一台獨立的機器跑，以免跑個 vim 都要卡三秒... XD

這時候就是該調整了：

  • 將 munin.conf 的 graph_strategy 與 html_strategy 都改成 cgi，告訴 Munin 在更新時只要更新 rrd 資料，而圖片與 html 的資料讓 cgi 做就好，這可以大幅減少 i/o rate。
  • 將 rrdcached 跑起來，讓 rrd 資料寫入次數更少。rrdcached 的預設參數要記得調整。
  • 將網站本來用 CGI 的部份改成 FastCGI，其實對 nginx 之類的 web server 反而是簡化了 (因為 nginx 內建只支援 FastCGI 而不支援 CGI)。

另外有些討厭的地方，strategy 設定不能放到 includedir 裡，一定得放 munin.conf 本體，這對於自建 ports 的人有點麻煩... (得用 pkg-install 與 @unexec 去堆設定，可以參考 ports-mgmt/portconf 對 /etc/make.conf 的作法)