1. 程式人生 > >InfluxDB從原理到實戰 - InfluxDB常用的基礎操作

InfluxDB從原理到實戰 - InfluxDB常用的基礎操作

0x00 基礎操作介紹

    在本文中將介紹InfluxDB常用的基礎操作,幫助讀者建立對InfluxDB的感性認識,快速的動手玩起來,持續查詢(Continuous Queies)、Group by、Series、行協議(Line Protocol)、InfluxQL等高階特性和細節,將會在後續文章中逐步介紹。
    InfluxDB支援類SQL的操作介面,儘管因為時序資料的特點,InfluxDB是非CRUD的,不支援更新資料、刪除單條資料操作,但考慮到大多數的讀者對應CRUD的關係型資料庫比較熟悉,在本文中,還是按照CRUD原則,介紹資料庫(Database)、保留策略(Retention Policy)、表(Measurement)、資料寫入、資料查詢、資料更新、資料刪除等內容。
    InfluxDB支援influx命令列和InfluxDB API 2種操作介面,在本文中,將以influx命令列的操作為例,介紹上述內容。本文的操作示例,基於InfluxDB最新的穩定版本,InfluxDB-v1.7.8。

0x01 資料庫(Database)

1.    建立資料庫
    通過CREATE語句,建立名為telegraf的資料庫。

$ influx
Connected to http://localhost:8086 version 1.7.8
InfluxDB shell version: 1.7.8
> create database telegraf
>


2.    檢視資料庫
    通過SHOW語句,檢視當前所有的資料庫。

> show databases;
name: databases
name
----
_internal
monito
telegraf
>


3.    刪除資料庫

    通過DROP語句,刪除名為telegraf的資料庫。

> drop database telegraf
>

4.    使用資料庫
    通過USE語句,使用名為telegraf的資料庫。

> use telegraf
Using database telegraf
>


0x02 保留策略(Retention Policy)
1.    檢視資料庫對應的保留策略
    通過SHOW語句,檢視資料庫telegraf對應的保留策略。

> show retention policies on telegraf
name    duration shardGroupDuration replicaN default
----    -------- ------------------ -------- -------
autogen 0s       168h0m0s           1        true
>


2.    建立保留策略
    通過CREATE語句,建立名為rp-one-year的保留策略。

> create retention policy "rp-one-year" on "telegraf" duration 365d replication 1
>
> show retention policies on telegraf
name        duration  shardGroupDuration replicaN default
----        --------  ------------------ -------- -------
autogen     0s        168h0m0s           1        true
rp-one-year 8760h0m0s 168h0m0s           1        false
> 


3.    更改保留策略
    通過ALTER語句,更改保留策略rp-one-year為資料庫telegraf的預設保留策略。

> alter retention policy "rp-one-year" on "telegraf" duration 365d replication 1 default
>
> show retention policies on telegraf
name        duration  shardGroupDuration replicaN default
----        --------  ------------------ -------- -------
autogen     0s        168h0m0s           1        false
rp-one-year 8760h0m0s 168h0m0s           1        true
>


4.    刪除保留策略
    通過DROP語句,刪除資料庫telegraf的保留策略rp-one-year。

> drop retention policy "rp-one-year" on "telegraf"
>
> show retention policies on telegraf
name    duration shardGroupDuration replicaN default
----    -------- ------------------ -------- -------
autogen 0s       168h0m0s           1        false
>


0x03 表(Measurement)

1.    建立表
    與MySQL等關係型資料不同,在InfluxDB中,無需顯式建立表,在寫入時序資料時,InfluxDB伺服器會根據行協議,按需自動建立對應的表。
    在資料庫telegraf中,插入資料時,自動建立了表devops-idc-sz。

> use telegraf
Using database telegraf
>
> show measurements
>
> insert devops-idc-sz,host=server01 cpu=23.1,mem=0.63
>
> show measurements
name: measurements
name
----
devops-idc-sz
>


2.    檢視measurements
    通過SHOW語句,,檢視資料庫telegraf中的所有的表。

> show measurements
name: measurements
name
----
devops-idc-sz
>


3.    刪除表
    通過DROP語句,刪除表devops-idc-sz和對應的所有資料。

> drop measurement devops-idc-sz
>
> show measurements
> 


0x04 資料寫入
    通過INSERT語句和行協議,向表devops-idc-sz中插入3條DevOps環境的時序資料記錄,時序資料對應的時間為2019/8/30 17:44:53。

> insert devops-idc-sz,host=server01 cpu=16.1,mem=0.43 1567158293000000000
> insert devops-idc-sz,host=server02 cpu=23.8,mem=0.63 1567158293000000000
> insert devops-idc-sz,host=server03 cpu=56.3,mem=0.78 1567158293000000000


0x05 資料查詢
    通過SELECT語句,查詢表devops-idc-sz中的所有資料。

> select * from devops-idc-sz
name: devops-idc-sz
time                cpu  host     mem
----                ---  ----     ---
1567158293000000000 16.1 server01 0.43
1567158293000000000 56.3 server03 0.78
1567158293000000000 23.8 server02 0.63
>


0x06 資料更新

    因為時序資料多寫少讀無更新的特點,InfluxDB,不支援資料更新操作,筆者亦不建議對時序資料記錄執行更新操作。如果在某些特殊場景下,必須對時序資料記錄的指標值進行更新,可以利用“時間戳(Timestamp)和時間序列線(Series)完全相同的時序資料記錄,是同一條時序資料記錄,新插入的時序資料,會覆蓋原有的時序資料記錄”的特性,更新時序資料記錄的的指標值。
    更新server01在2019/8/30 17:44:53的時序資料記錄的指標值。

> insert devops-idc-sz,host=server01 cpu=76.1,mem=0.83 1567158293000000000
>
> select * from devops-idc-sz
name: devops-idc-sz
time                cpu  host     mem
----                ---  ----     ---
1567158293000000000 76.1 server01 0.83
1567158293000000000 56.3 server03 0.78
1567158293000000000 23.8 server02 0.63
>


0x07 資料刪除

    同樣,因為時序資料多寫少讀無更新和批量刪除時序資料記錄的特點,InfluxDB不支援刪除單條時序資料記錄。除了通過保留策略週期性的定時刪除時序資料記錄,InfluxDB還還還支援通過WHERE條件語句、刪除時間序列線、刪除表、刪除資料庫、刪除分片(Shard)等方式直接批量刪除指定的時序資料記錄。

1.    通過WHERE條件語句從指定表中刪除時序資料記錄,從表devops-idc-sz中,刪除標籤名為host,標籤值為server01、在2019/8/30 17:44:53時間點的時序資料記錄。
(注意:WHERE條件語句,不支援指標(Field),只支援標籤和時間戳。)

> delete from  devops-idc-sz where "host"='server01' and  time=1567158293s
>


2. 通過刪除時間序列線刪除時序資料記錄,刪除標籤對"host"='server01'對應的時間序列線的所有時序資料記錄。

> drop series from devops-idc-sz where "host"='server01'
>


3. 通過刪除指定表刪除時序資料記錄,刪除表devops-idc-sz對應的所有時序資料記錄。

> drop measurement devops-idc-sz
>


4. 通過刪除指定資料庫刪除時序資料記錄,刪除資料庫telegraf對應的所有時序資料記錄。

> drop database telegraf
>


5. 通過刪除指定分片刪除時序資料記錄,刪除分片 6對應的所有時序資料記錄。

> select *  from  devops-idc-sz
name: devops-idc-sz
time                cpu  host     mem
----                ---  ----     ---
1567158293000000000 16.1 server01 0.43
1567158293000000000 56.3 server03 0.78
1567158293000000000 23.8 server02 0.63
>
> show shards
name: _internal
id database  retention_policy shard_group start_time           end_time             expiry_time          owners
-- --------  ---------------- ----------- ----------           --------             -----------          ------
1  _internal monitor          1           2019-08-27T00:00:00Z 2019-08-28T00:00:00Z 2019-09-04T00:00:00Z
4  _internal monitor          4           2019-08-30T00:00:00Z 2019-08-31T00:00:00Z 2019-09-07T00:00:00Z

name: monito
id database retention_policy shard_group start_time           end_time             expiry_time          owners
-- -------- ---------------- ----------- ----------           --------             -----------          ------
3  monitor  autogen          3           2019-04-29T00:00:00Z 2019-05-06T00:00:00Z 2019-05-06T00:00:00Z
2  monitor  autogen          2           2019-08-26T00:00:00Z 2019-09-02T00:00:00Z 2019-09-02T00:00:00Z

name: telegraf
id database retention_policy shard_group start_time           end_time             expiry_time          owners
-- -------- ---------------- ----------- ----------           --------             -----------          ------
6  telegraf autogen          6           2019-08-26T00:00:00Z 2019-09-02T00:00:00Z 2019-09-02T00:00:00Z
>
> drop shard 6
>
> select *  from  devops-idc-sz
> 


後記:

歡迎交流討論:
微信公眾號:influxdb-dev。
InfluxDB技術交流群(QQ):66327412