新闻cms静态网站模板下载,商务网站建设步骤,视频网站能备案吗,图片在线制作二维码一、kibana是啥#xff0c;能干嘛
我们经常会用es来实现一些关于检索#xff0c;关于分析的业务。但是es本身并没有UI,我们只能通过调用api来完成一些能力。而kibana就是他的一个外置UI#xff0c;你完全可以这么理解。 当我们进入kibana的主页的时候你可以看到这样的布局。…一、kibana是啥能干嘛
我们经常会用es来实现一些关于检索关于分析的业务。但是es本身并没有UI,我们只能通过调用api来完成一些能力。而kibana就是他的一个外置UI你完全可以这么理解。 当我们进入kibana的主页的时候你可以看到这样的布局。 他展示了四大模块分别是 1、Enterprise Search 企业级搜索这个不难理解他本身就是和es密切配合的当然可以做搜索。 2、Observability 可观测性kibana可以用来监控应用的性能指标等一系列能力因为他可以和APM整合使用。 3、Security 安全性kibana可以收集指标信息做出预警等一系列操作来保证安全性。 4、Analytics 分析 kibana可以在已有的数据上绘制图表折线图还是直方图还是饼图等等用来帮助你分析数据。
这都是他拥有的能力可以看到其实kibana技术栈十分强大。你可以从他的目录进去看到他的能力和内容。 可见操作还是很方便的。而这四大能力我们将会从Analytics 分析 开始逐步研究他的实现和操作。
二、填充数据
当我们有了es和kibana的时候既然我们要研究分析功能分析你得有数据吧。实际上你可以有很多种方式向es中写入数据包括你直接调用es得api写入。但是这里我们不准备写代码我们只看kibana.kibana中本身就是支持向es中灌数据的。我们来看这里。
1、导入kibana内置数据
我们这里先灌入kibana的内置数据我们点进去这个Try sample data。 这里kibana为我们内置了三类数据。分别是 1、Sample eCommerce orders电商数据你可以用来做一些电商分析。 2、Sample flight data航空公司数据如果你做一些航空打车之类的业务可以用这个模拟。 3、Sample web logsweb应用的日志数据分析实际上这个我们比较常用毕竟日志分析大家都有需求。 你只需要点击add data就能添加进去了而且对应的es索引他也会给你创建。很自动化。 这里我们把三个数据都加进去。 添加进去之后你来到分析栏目的discover就能看到数据。 你可以切换你的数据类型然后右边的列表就会展示出来ok此时我们算是成功导入了我们接下来来看如何分析这几类数据。
2、导入自己的数据
我们还可以以json和csv格式导入外部数据我们先来准备一份数据。这份数据可以到这个地址去下载。卖房子的样本数据 ok我们来看操作。 点进去这里上传数据文件。 点击这个import我们来看。 此外你还要去Advanced去看一下我们导入数据索引的映射也就是mapping这个mapping在es中异常重要。 这三个部分你要检查一下如果kibana设置的不对你可以做修改比如日期字段它要是没给你设置成date,可能后面你用日期范围检索就会有问题目前看来我们这个好像没啥问题。 我们直接下一步就好了。 我们再回到Analytics的discover查看这个索引。 没数据的原因在于页面的检索条件范围。右上角有个时间范围是检索最近15分钟的数据我们导入进去的数据估计时间都好几年前的了所以我们调整一下检索条件。实际上如果有人要你分析几天之前或者多久之前的数据你就可以来这里修改时间。 ok此时就看到数据了没有问题。 此时我们就完成了两种方式的填充数据接下来我们会用这些数据来实现我们的功能。
三、分析数据
1、简单的分析例子
我们先来简单看一下如何玩我们先来分析一下航空公司数据。 此时我们看到它以列表的形式展示出来了航空数据的内容不过它默认展示近15分钟的(右上角的时间条件)这个近15分钟指的是数据中的timestamp字段范围。而且我们同事看到这个列表只展示了两列字段分别是timestamp和整个文档实际上这样很不可读你直接读这个doc文档难看死了所以我们可以来添加几个我们想要的列。 添加列 比如我想查看FlightNum航空公司号这个列。我们只需要在左侧点中这个字段的号即可。 于是列表就变成了这样。 kql过滤条件 因为时间是右上角的条件他会一直存在的。那如果我们想自己添加检索条件呢上面有写kql的地方也就是这里。 比如我想查看FlightNum为05ZASIX的数据那就是这样。 当然你可能觉得这个kql很难写不好记放心你输入的时候kibana会有提示。而且如果你多个条件的话可以用and如果你有优先级逻辑的话可以用()括起来之类的操作都可以。而且它还支持通配符那些做模糊检索。数字类型的 都可以的。 但是它存在一个问题就是如果我执行完查询之后再切出去再回来这个他是不会为我们留下记录的。有时候你输入了一个很复杂的检索条件再让你输入一遍你是不是想死。 于是它提供了保存功能我们可以把这个条件存起来以后想用的时候就拿来用我们来看一下。 我们可以在这保存我们的检索条件。 其中include fiters这个默认勾选的其实就是保存你的条件 include time filter默认不勾选他是会保存你右上角那个时间条件你想勾就勾吧。 等你再次想查的时候只需要加载就好。。 此时条件就又被加载上去了你也不用再写一遍了。 展示详情 那我如果想看这个文档的详情呢 点这里就能展示详情你可以看列表形式或者json形式都可以。 对字段的统计分析 我们有一个字段是Carrier他表示航空的运营商可能就是什么山东航空国航之类的吧具体老外的航空我也不太懂。假如我们要统计一下过去七天内的数据中各个航空公司的数量占比呢注意这个功能对那些地理位置的存储字段没用。 而且你发现下面还能查看分析表visualize你点进去就看到他给你绘制了图表。 所以很方便。 按字段排序 我们这个列表你不指定就是按时间倒排的如果我想按照FlightNum来排序呢 全屏展示 点击这个可以全屏显示数据。不过好像没啥必要比较鸡肋。 字段统计Field statistics 我们来到我们的列表。此时我们查看过去30天的数据其实就是所有的数据。
我们看到这里有一个Field statistics的按钮他的作用是帮助我们统计分析我们列表上展示的字段。点进去看看。我们列表有一个DistanceKilometers里程字段。 你能看到他他可以对某个字段进行分析当然这是个测试功能可能在未来高版本会正式启动。 他会列出什么排行榜最大值中值最小值等等。
