阿里云-云小站(无限量代金券发放中)
【腾讯云】云服务器、云数据库、COS、CDN、短信等热卖云产品特惠抢购

ELK-数据管理

417次阅读
没有评论

共计 1943 个字符,预计需要花费 5 分钟才能阅读完成。

一、elasticsearch 基础概念

主要的基础概念有: Index,Type,Document,Field,shard 和 replicas.

Index(索引): 是具有相似特性的文档集合。

Type(类型): 在一个索引中可以定义一个或多个类型。

Documenet(文档): 索引信息的基本单位。

Field(字段): ES 里更小的信息单位。

shard(分片):数据存储的方式

replicas(副本):副本 数据备份

为了便于理解, 我们和 mysql 这种关系型数据库做一个对比:

关系型数据库 (如 mysql,oracle 等) elasticsearch
database index
table type
row document
column field

ES 是分布式搜索引擎,每个索引有一个或多个分片 (shard),索引的数据被分配到各个分片上。你可以看作是一份数据分成了多份给不同的节点。

二、elaticsearch 基础 API 操作

如果有 ES 集群, 则为 ES 任意节点 IP 都可以

前面我们通过 http://192.168.98.201:9200/_cluster/health?pretty 查看 ES 集群状态, 其实就是它的一种 API 操作。

什么是 API? API(Application Programming Interface) 应用程序编程接口, 就是无需访问程序源码或理解内部工作机制就能实现一些相关功能的接口。

elasticseearch 的 API 很多, 我们运维人员主要用到以下几个要介绍的较简单的 API。

更多 API 参考: https://www.elastic.co/guide/en/elasticsearch/reference/6.2/index.html

查看节点信息

通过 curl 或浏览器访问 http://192.168.98.202:9200/_cat/nodes?v ip 为 ES 节点 IP, 如果有 ES 集群, 则为 ES 任意节点 IP 都可以 )

[root@node1 ~]# curl http://192.168.98.202:9200/_cat/nodes?v ip heap.percent ram.percent cpu load_1m load_5m load_15m node.role master name 192.168.98.201 9 94 0 0.09 0.06 0.06 dilm * node1 192.168.98.202 15 92 4 0.12 0.14 0.11 dilm - node2

使用浏览器访问

ELK- 数据管理

三、索引管理

  • 文本界面 API 管理索引
  • web 图形 ES-head 管理索引

文本界面管理索引

  • 查看索引信息

通过 curl 或浏览器访问 http://192.168.98.201:9200/_cat/indices?v

[root@node1 ~]# curl http://192.168.98.201:9200/_cat/indices?v health status index uuid pri rep docs.count docs.deleted store.size pri.store.size 默认现在没有任何索引
  • 新增索引
[root@node1 ~]# curl -X PUT http://192.168.98.201:9200/zutuanxue_com_access_log [root@node1 ~]# 输出信息 {"acknowledged":true,"shards_acknowledged":true,"index":"zutuanxue_com_access_log"} [root@node1 ~]# curl http://192.168.98.201:9200/_cat/indices?v health status index uuid pri rep docs.count docs.deleted store.size pri.store.size green open zutuanxue_com_access_log A_keWJh4RSOUS3gKCX2AwA 1 1 0 0 460b 230b

ELK- 数据管理

green: 表示每个 index 的 shard 和 replica 都是活跃状态的。

yellow: 表示每个 index 的 shard 是活跃状态的,replica 是不可用状态的。

red:表示索引中有些 shard 是不可用状态,导致数据丢失。

  • 删除索引
[root@node1 ~]# curl -X DELETE http://192.168.98.201:9200/zutuanxue_com_access_log {"acknowledged":true}

当 ES 集群增加或删除节点时,shard 会在多个节点中均衡分配。7.0 之前,默认是 5 个 primary shard(主分片) 和 1 个 replica shard(副本, 用于容错)。7.x 之后是 1 个主分片 1 个副本分片

正文完
星哥玩云-微信公众号
post-qrcode
 0
星锅
版权声明:本站原创文章,由 星锅 于2022-06-09发表,共计1943字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。
【腾讯云】推广者专属福利,新客户无门槛领取总价值高达2860元代金券,每种代金券限量500张,先到先得。
阿里云-最新活动爆款每日限量供应
评论(没有评论)
验证码
【腾讯云】云服务器、云数据库、COS、CDN、短信等云产品特惠热卖中

星哥玩云

星哥玩云
星哥玩云
分享互联网知识
用户数
4
文章数
19350
评论数
4
阅读量
7897640
文章搜索
热门文章
开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南

开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南

开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南 大家好,我是星哥。之前介绍了腾讯云的 Code...
星哥带你玩飞牛NAS-6:抖音视频同步工具,视频下载自动下载保存

星哥带你玩飞牛NAS-6:抖音视频同步工具,视频下载自动下载保存

星哥带你玩飞牛 NAS-6:抖音视频同步工具,视频下载自动下载保存 前言 各位玩 NAS 的朋友好,我是星哥!...
星哥带你玩飞牛NAS-3:安装飞牛NAS后的很有必要的操作

星哥带你玩飞牛NAS-3:安装飞牛NAS后的很有必要的操作

星哥带你玩飞牛 NAS-3:安装飞牛 NAS 后的很有必要的操作 前言 如果你已经有了飞牛 NAS 系统,之前...
我把用了20年的360安全卫士卸载了

我把用了20年的360安全卫士卸载了

我把用了 20 年的 360 安全卫士卸载了 是的,正如标题你看到的。 原因 偷摸安装自家的软件 莫名其妙安装...
再见zabbix!轻量级自建服务器监控神器在Linux 的完整部署指南

再见zabbix!轻量级自建服务器监控神器在Linux 的完整部署指南

再见 zabbix!轻量级自建服务器监控神器在 Linux 的完整部署指南 在日常运维中,服务器监控是绕不开的...
阿里云CDN
阿里云CDN-提高用户访问的响应速度和成功率
随机文章
优雅、强大、轻量开源的多服务器监控神器

优雅、强大、轻量开源的多服务器监控神器

优雅、强大、轻量开源的多服务器监控神器 在多台服务器同时运行的环境中,性能监控、状态告警、资源可视化 是运维人...
每年0.99刀,拿下你的第一个顶级域名,详细注册使用

每年0.99刀,拿下你的第一个顶级域名,详细注册使用

每年 0.99 刀,拿下你的第一个顶级域名,详细注册使用 前言 作为长期折腾云服务、域名建站的老玩家,星哥一直...
星哥带你玩飞牛 NAS-9:全能网盘搜索工具 13 种云盘一键搞定!

星哥带你玩飞牛 NAS-9:全能网盘搜索工具 13 种云盘一键搞定!

星哥带你玩飞牛 NAS-9:全能网盘搜索工具 13 种云盘一键搞定! 前言 作为 NAS 玩家,你是否总被这些...
Prometheus:监控系统的部署与指标收集

Prometheus:监控系统的部署与指标收集

Prometheus:监控系统的部署与指标收集 在云原生体系中,Prometheus 已成为最主流的监控与报警...
多服务器管理神器 Nexterm 横空出世!NAS/Win/Linux 通吃,SSH/VNC/RDP 一站式搞定

多服务器管理神器 Nexterm 横空出世!NAS/Win/Linux 通吃,SSH/VNC/RDP 一站式搞定

多服务器管理神器 Nexterm 横空出世!NAS/Win/Linux 通吃,SSH/VNC/RDP 一站式搞...

免费图片视频管理工具让灵感库告别混乱

一言一句话
-「
手气不错
星哥带你玩飞牛NAS硬件02:某鱼6张左右就可拿下5盘位的飞牛圣体NAS

星哥带你玩飞牛NAS硬件02:某鱼6张左右就可拿下5盘位的飞牛圣体NAS

星哥带你玩飞牛 NAS 硬件 02:某鱼 6 张左右就可拿下 5 盘位的飞牛圣体 NAS 前言 大家好,我是星...
星哥带你玩飞牛NAS硬件03:五盘位+N5105+双网口的成品NAS值得入手吗

星哥带你玩飞牛NAS硬件03:五盘位+N5105+双网口的成品NAS值得入手吗

星哥带你玩飞牛 NAS 硬件 03:五盘位 +N5105+ 双网口的成品 NAS 值得入手吗 前言 大家好,我...
安装Black群晖DSM7.2系统安装教程(在Vmware虚拟机中、实体机均可)!

安装Black群晖DSM7.2系统安装教程(在Vmware虚拟机中、实体机均可)!

安装 Black 群晖 DSM7.2 系统安装教程(在 Vmware 虚拟机中、实体机均可)! 前言 大家好,...
颠覆 AI 开发效率!开源工具一站式管控 30+大模型ApiKey,秘钥付费+负载均衡全搞定

颠覆 AI 开发效率!开源工具一站式管控 30+大模型ApiKey,秘钥付费+负载均衡全搞定

  颠覆 AI 开发效率!开源工具一站式管控 30+ 大模型 ApiKey,秘钥付费 + 负载均衡全...
星哥带你玩飞牛NAS-11:咪咕视频订阅部署全攻略

星哥带你玩飞牛NAS-11:咪咕视频订阅部署全攻略

星哥带你玩飞牛 NAS-11:咪咕视频订阅部署全攻略 前言 在家庭影音系统里,NAS 不仅是存储中心,更是内容...