「Grafana」安装使用Grafana

Grafana监控面板安装 1docker run -d --name=grafana -p 3000:3000 grafana/grafana

「InfluxDB」InfluxDB 安装

安装InfluxDB 1docker run --name=influxdb -d -p 8086:8086 influxdb 2docker exec -it influxdb influx InfluxDB Desc 对应数据库 database 数据库 measurement 数据库中的表 point 表中的一行数据 databases 1show databases 2use iaas_metrics 3show measurements 数据查询 1select * from host_CpuBusy where time > now() -7d order by time limit 10; influx(“telegraf”, ‘‘‘SELECT sum(usage_system) FROM “cpu” group by “host” ‘’’, “20m”, “2m”, “1m”)**** https://zhuanlan.zhihu.com/p/97247465 https://zhuanlan.zhihu.com/p/85097140 https://www.cnblogs.com/suhaha/p/11692210.html https://www.cnblogs.com/suhaha/p/11692210.html grafa 配置查询influxdb https://ken.io/note/grafana-quickstart-influxdb-datasource-graph https://www.jianshu.com/p/f0905f36e9c3

January 1, 0001 Read

「Telegraf」 Telegraf

Telegraf is an agent for collecting metrics and writing the to InfluxDB or other outputs. Install 1docker run -d --name telegraf --net=container:influxdb telegraf

January 1, 0001 Read

「TSDB」时序数据&时序数据库简介

什么是时序数据？时序数据的应用场景和特征？时序数据库？时序数据时序数据，就是与时间强相关度的一系列数据。关注的是某一时刻的数据值，而不是最终的数据。是一个过程而不是一个结果。时序数据描述的是一个数据（指标）在时间维度上的变化。例如：股票K线、环境监测。时序数据的特征：数据以一定的时间间隔产生，生产速率稳定。写入多，查询少时序数据不允许更新时序数据主要是按时间范围查询时序数据库传统的数据库并不适合存储时序数据，针对时序数据的特征，时序数据库的基本要求如下：支持高并发、高吞吐量的写入支持海量数据存储高可用（时序数据在互联网公司常用作报警数据源）支持复杂的多维度的查询易于横向扩展常见的时序数据库时序数据基本概念一条时序数据是由多个DataPoint构成的。每个DataPoint包含以下几个方面 metric：一般也叫metric name，是时序数据的指标名 tags: 一个或者多个tag组合，用户描述metric的不同维度。每个Tag由tagk&tagv组成。例如：一个请求的来源 host=10.20.178.23，dc=cn。tags标明数据的维度。 value：表示对应的数值。例如：请求的latency 或者qps等。 timestamp：时序数据的具体时间，可以是秒级或者毫秒级别的Unix时间戳。例如： JVM_Heap_Memory_Usage_MB{host=127.0.0.1, instanceId=jvm01} Downsampling

January 1, 0001 Read

Bosun

Telegraf is an agent for collecting metrics and writing the to InfluxDB or other outputs. 使用bosun之前首先要了解什么是时序数据，时序数据的组成部分以及时序数据的常用查询时序数据的类型 counter guage(store) Bosun的数据类型 Scalar NumberSet： Group+Scalar Bosun 查询语法简单查询查询过去10分钟到过去1分钟之间的时序数据 avg是时序数据库的的运算，对不同的tag set的数据求平均最外面的avg 是对这段时间内的时序数据做一个平均，得到一个数值宏替换运算的时候会对变量进行宏替换 OpenTSDB 如果没有数据的时候会导致bosun查询失败，可以采取不上 1avg(100*q("avg:1m-avg-zero:store:toutiao.tce.sysprobe.aweme.recommend.predict.cpu.usage.pod{sidecar_psm=ad.qa.java_sidecar,pod_name=dp-cb2f23ec64-6987c9d65d-ds7j5}","1h","")/q("avg:1m-avg:store:toutiao.tce.sysprobe.aweme.recommend.predict.cpu.limit.pod{sidecar_psm=ad.qa.java_sidecar,pod_name=dp-cb2f23ec64-6987c9d65d-ds7j5}","1h","")) Streak 连续非0 数据的最大长度 https://blog.csdn.net/lslxdx/article/details/79454916 转置 InfluxDB 1influx("iaas_metrics", '''SELECT sum(value) FROM "host_CpuSystem" group by "resource_id" ''', "7d", "2m", "1m") Bosun, Time Series, and OpenTSDB’s DataModel An introduction to the data model of Bosun’s Primary time series backend OpenTSDB.

January 1, 0001 Read

Deploy essential components by Docker

K8sStudy: Docker Node: Jenkins, Mysql, casbin_allinone, portioner,hemidall (1 node 4 core, 8G) ODMS with NFS. (3 node, 1 NFS node) K8s node for CNI study K8s node for others, DPDK? Dev node for source code and dev move Openwrt and VM to a same node Application Casdoor 1docker run -d --restart=always --name casdoor \ 2-p 8001:8000 \ 3casbin/casdoor-all-in-one Heimdall 1docker volume create heimdall 2docker run -d --restart unless-stopped --name=heimdall \ 3-e PUID=1000 -e PGID=1000 -e TZ=Europe/London \ 4-p 8086:80 -p 8463:443 \ 5-v heimdall:/config \ 6linuxserver/heimdall:latest CI&CD Jenkins 1docker volume create jenkins_data 2docker run -d --restart=always --name jenkins \ 3-u 0 --privileged \ 4-p 8080:8080 -p 50000:50000 \ 5-v jenkins_data:/var/jenkins_home \ 6-v /var/run/docker.

January 1, 0001 Read

安装配置Mysql

修改表字段 1# 新增一个字段 2alert table rules add effect_time mysql sql 8.0 认证问题 connect to 10.227.4.115:3306 err: this authentication plugin is not supported 1alter user root@% identified with mysql_native_password by "123456" 1CREATE DATABASE IF NOT EXISTS echo_bio DEFAULT CHARSET utf8 COLLATE utf8_general_ci; 2CREATE DATABASE IF NOT EXISTS echo_bio_jira DEFAULT CHARSET utf8 COLLATE utf8_general_ci;

January 1, 0001 Read