netdata backend database support - InfluxDB + Grafana UI

How to install netdata

 bash <(curl -Ss https://my-netdata.io/kickstart-static64.sh)

Edit netdata.conf at /opt/netdata/etc/netdata

[global]
        # glibc malloc arena max for plugins = 1
        hostname = R720-H17-51
        history = 3996
        update every = 1
        config directory = /opt/netdata/etc/netdata
        log directory = /opt/netdata/var/log/netdata
        web files directory = /opt/netdata/usr/share/netdata/web
        cache directory = /opt/netdata/var/cache/netdata
        lib directory = /opt/netdata/var/lib/netdata
        home directory = /opt/netdata/var/cache/netdata
        plugins directory = "/opt/netdata/usr/libexec/netdata/plugins.d" "/opt/netdata/etc/netdata/custom-plugins.d"
        memory mode = save
        memory deduplication (ksm) = yes
        TZ environment variable = :/etc/localtime
        timezone = Asia/Taipei
        debug flags = 0x0000000000000000
        debug log = /opt/netdata/var/log/netdata/debug.log
        error log = /opt/netdata/var/log/netdata/error.log
        access log = /opt/netdata/var/log/netdata/access.log
 

[backend]
         host tags =  list
         enabled = yes
         data source = average
         type = opentsdb
         destination = tcp:172.22.4.101:4242
         prefix = netdata
         hostname = R720-H17-51
         update every = 10
         buffer on failures = 10
         timeout ms = 20000

Save netdata.conf and restart netdata service
$systemctl restart netdata

 

The backend server is a Ubuntu Server

$sudo apt-get install influxdb
$sudo apt-get install grafana
​$vi /etc/influxdb/influxdb.conf

[meta]
  # Controls if this node should run the metaservice and participate in the Raft group
  enabled = true

  # Where the metadata/raft database is stored
  dir = "/var/lib/influxdb/meta"

  bind-address = ":8088"
  retention-autocreate = true
  election-timeout = "1s"
  heartbeat-timeout = "1s"
  leader-lease-timeout = "500ms"
  commit-timeout = "50ms"
  cluster-tracing = false
[data]
  # Controls if this node holds time series data shards in the cluster
  enabled = true
  dir = "/var/lib/influxdb/data"
  # The following WAL settings are for the b1 storage engine used in 0.9.2. They won't
  # apply to any new shards created after upgrading to a version > 0.9.3.
  max-wal-size = 104857600 # Maximum size the WAL can reach before a flush. Defaults to 100MB.
  wal-flush-interval = "10m" # Maximum time data can sit in WAL before a flush.
  wal-partition-flush-delay = "2s" # The delay time between each WAL partition being flushed.
  # These are the WAL settings for the storage engine >= 0.9.3
  wal-dir = "/var/lib/influxdb/wal"
  wal-logging-enabled = true
  data-logging-enabled = true
[opentsdb]
  enabled = true
  bind-address = "172.22.4.101:4242"
  database = "opentsdb"
  # retention-policy = ""
  consistency-level = "one"
  tls-enabled = false
  # certificate= ""
  log-point-errors = true # Log an error for every malformed point.

Save influxdb.conf and restart influxdb service
$sudo /etc/init.d/influxdb restart

Open web broswer and typing http://172.22.4.101:8083
We can check the db name openstdb as below screenshot

Check the netdata sending data

Add a user account / password for Grafana connection

 

Open web browser and typing http://172.22.4.101 login with default account and password: admin / admin

Then add Data Sources
 

New a Dashboards

Edit Metrics and select data source FROM 

Edit Axcs & Grids Change Left Y Unit to current unit

Finally , Ctrl + s for save setting

Read more

How to document Home Lab and Network

運維機房和跨域的網路,會遇到各式需求與問題,用對工具才能分析問題,個人覺得最重要的是使用能處理問題的工具。 推薦目前想學和正在使用的平台與軟體,協助將公司/家用機房文件化 佈告欄任務管理 Focalboard 白板可管理任務指派 網路架構文件編寫 netbox 精細管理網路設備與連接線路 IP 資源管理 phpipam 專注網路IP分配 邏輯塊文件編寫 draw.io 視覺化概念圖 機房設備管理 ITDB 管理設備生命週期與使用者

By Phillips Hsieh

如何在Raspberry Pi4上安裝Proxmox for ARM64

第一步 準備好Raspberry Pi 4 / CM4 4GB RAM,這裡要留意CM4如果是買有內建eMMC storage會限制不能使用SD卡開機而限制本地空間容量,如果沒有NAS外接空間或使用USB開機的話,建議買CM4 Lite插上大容量SD卡 第二步 去Armbian官網下載最小化Debian bookworm image https://www.armbian.com/rpi4b/ Armbian 25.2.2 Bookworm Minimal / IOT 然後寫入SD/USB開機碟,寫入方法參考官方文件 https://github.com/raspberrypi/usbboot/blob/master/Readme.md Note: 官方提供的預先設定系統方法,可以在Armbian初次啟動自動化完成系統設定。連結在此 https://docs.armbian.com/User-Guide_Autoconfig/

By Phillips Hsieh

世界越快心越慢

在晚飯後的休息時間,我特別享受在客廳瀏灠youtube上各樣各式創作者的影音作品。很大不同於傳統媒體,節目多是針對大多數族群喜好挑選的,在youtube上我會依心情看無腦的動畫、一些旅拍記錄、新聞時事談論。 尤其在看了大量的Youtube的分享後,我真的感受到會限制我的是我的無知,特別是那些我想都沒想過的實際應用,在學習後大大幫助到我的生活和工作層面。 休息在家時,我喜歡想一些沒做過的菜,動手去設計生活和工作上的解決方案,自己是真的很難閒著沒事做。 如創作文章,陪養新的習慣都能感覺到成長的喜悅,是不同於吃喝玩樂的快樂的。 創作不去限制固定的形式,文字是創作、影像聲音也是創作,記錄生活也是創作,我想留下的就是創造—》實現—》回憶,這樣子的循環過程,在留下的足跡面看到自己一路上的成長、失敗、絕望、重新再來。 雖然大部份的時候去做這些創作也不明白有什麼特別的意義,但不去做也不會留下什麼,所以呀不如反事都去試試看,也許能有不一樣的水花也許有意想不到的結果,投資自己永遠不會是失敗的決定,不是嗎?先問問自己再開始計畫下一步,未來沒人說得準。 像最近看youtube仍大一群人在為DOS開

By Phillips Hsieh

知識管理的三個步驟:一小時學會把知識運用到生活上

摘錄瓦基「閱讀前哨站」文章作為自己學習知識管理的內容 Part1「篩選資訊」 如何從海量資訊中篩選出啟發性、實用性和相關性的精華,讓你在學習過程中不再迷失方向。 1. 實用性 2. 啟發性 Part2「提高理解」 如何通過譬喻法和應用法,將抽象的知識與日常生活和工作緊密結合,建立更深刻的理解。 1. 應用法 2. 譬喻法 Part3「運用知識」 如何連結既有知識,跟自己感興趣的領域和專案產生關聯,讓你在運用知識的路途上游刃有餘。 1. 跟日常工作專案、人際活動產生連結 # 為什麼要寫日記? * 寫日記是為了忘記,忘卻瑣碎事情,保持專注力 * 寫日記就像在翻譯這個世界,訓練自己的解讀能力 * 不只是透過日記來記錄生活,而是透過日記來發展生活 #如何寫日記? * 不要寫流水帳式的日記,而是寫覆盤式的日記 當我們試著記錄活動和感受之間的關聯,有助於辦認出真正快樂的事 日記的記錄方式要以過程為主,而非結果 * 感恩日記的科學建議,每日感恩的案例

By Phillips Hsieh