阿里云-云小站(无限量代金券发放中)
【腾讯云】云服务器、云数据库、COS、CDN、短信等热卖云产品特惠抢购

ELK-数据管理

140次阅读
没有评论

共计 1943 个字符,预计需要花费 5 分钟才能阅读完成。

一、elasticsearch 基础概念

主要的基础概念有: Index,Type,Document,Field,shard 和 replicas.

Index(索引): 是具有相似特性的文档集合。

Type(类型): 在一个索引中可以定义一个或多个类型。

Documenet(文档): 索引信息的基本单位。

Field(字段): ES 里更小的信息单位。

shard(分片):数据存储的方式

replicas(副本):副本 数据备份

为了便于理解, 我们和 mysql 这种关系型数据库做一个对比:

关系型数据库 (如 mysql,oracle 等) elasticsearch
database index
table type
row document
column field

ES 是分布式搜索引擎,每个索引有一个或多个分片 (shard),索引的数据被分配到各个分片上。你可以看作是一份数据分成了多份给不同的节点。

二、elaticsearch 基础 API 操作

如果有 ES 集群, 则为 ES 任意节点 IP 都可以

前面我们通过 http://192.168.98.201:9200/_cluster/health?pretty 查看 ES 集群状态, 其实就是它的一种 API 操作。

什么是 API? API(Application Programming Interface) 应用程序编程接口, 就是无需访问程序源码或理解内部工作机制就能实现一些相关功能的接口。

elasticseearch 的 API 很多, 我们运维人员主要用到以下几个要介绍的较简单的 API。

更多 API 参考: https://www.elastic.co/guide/en/elasticsearch/reference/6.2/index.html

查看节点信息

通过 curl 或浏览器访问 http://192.168.98.202:9200/_cat/nodes?v ip 为 ES 节点 IP, 如果有 ES 集群, 则为 ES 任意节点 IP 都可以 )

[root@node1 ~]# curl http://192.168.98.202:9200/_cat/nodes?v ip heap.percent ram.percent cpu load_1m load_5m load_15m node.role master name 192.168.98.201 9 94 0 0.09 0.06 0.06 dilm * node1 192.168.98.202 15 92 4 0.12 0.14 0.11 dilm - node2

使用浏览器访问

ELK- 数据管理

三、索引管理

  • 文本界面 API 管理索引
  • web 图形 ES-head 管理索引

文本界面管理索引

  • 查看索引信息

通过 curl 或浏览器访问 http://192.168.98.201:9200/_cat/indices?v

[root@node1 ~]# curl http://192.168.98.201:9200/_cat/indices?v health status index uuid pri rep docs.count docs.deleted store.size pri.store.size 默认现在没有任何索引
  • 新增索引
[root@node1 ~]# curl -X PUT http://192.168.98.201:9200/zutuanxue_com_access_log [root@node1 ~]# 输出信息 {"acknowledged":true,"shards_acknowledged":true,"index":"zutuanxue_com_access_log"} [root@node1 ~]# curl http://192.168.98.201:9200/_cat/indices?v health status index uuid pri rep docs.count docs.deleted store.size pri.store.size green open zutuanxue_com_access_log A_keWJh4RSOUS3gKCX2AwA 1 1 0 0 460b 230b

ELK- 数据管理

green: 表示每个 index 的 shard 和 replica 都是活跃状态的。

yellow: 表示每个 index 的 shard 是活跃状态的,replica 是不可用状态的。

red:表示索引中有些 shard 是不可用状态,导致数据丢失。

  • 删除索引
[root@node1 ~]# curl -X DELETE http://192.168.98.201:9200/zutuanxue_com_access_log {"acknowledged":true}

当 ES 集群增加或删除节点时,shard 会在多个节点中均衡分配。7.0 之前,默认是 5 个 primary shard(主分片) 和 1 个 replica shard(副本, 用于容错)。7.x 之后是 1 个主分片 1 个副本分片

正文完
星哥说事-微信公众号
post-qrcode
 
星锅
版权声明:本站原创文章,由 星锅 2022-06-09发表,共计1943字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。
【腾讯云】推广者专属福利,新客户无门槛领取总价值高达2860元代金券,每种代金券限量500张,先到先得。
阿里云-最新活动爆款每日限量供应
评论(没有评论)
验证码
【腾讯云】云服务器、云数据库、COS、CDN、短信等云产品特惠热卖中