1 概述 1.1 Elastic Stack的核心 The Elastic Stack,包括ElasticSearch,Kibana,Beats和Logstash(也称为ELK Stack) 能够安全可靠的获取任何来源,任何格式的数据,然后实时的对诗句进行搜索,分析和可视化 Elas...[2021/6/28]

使用步骤 1.环境准备 用的是windows版,自行下载 链接: 下载地址 2.针对索引操作 这里是kibana上操作的(也可以用postman操作)： #创建索引,指定文档id PUT /test1/type1/1 { "name":"张三", ...[2021/6/28]

Aggregation 简介 ps : 本篇文章 Elasticsearch 和 Kibana 版本为 7.10.1。如果版本不一致请查看官方文档，避免误导！ 聚合框架有助于基于搜索查询提供聚合数据。它基于称为聚合的简单构建块，可以组合以构建复杂的数据摘要。 Elasticsearch 将聚...[2021/5/31]

前言 本文主要介绍ElasticSearch在使用过程中出现的各种问题解决思路和办法。 ElasticSearch环境安装问题 1，max virtual memory areas vm.max_map_count [65530] is too low, increase to at least...[2021/5/31]

1:使用docker拉取Elasticsearch镜像 docker pull elasticsearch:7.12.0（不加版本号默认是最新版本） 2:查看是否成功下载镜像 docker images      3:创建elasticsearc...[2021/5/6]

Elasticsearch 是一款非常强大的开源搜索及分析引擎。结合 Kibana、Logstash和Beats，Elasticsearch 还被广泛运用在大数据近实时分析，包括日志分析、指标监控、信息安全等多个领域。 在国内，阿里巴巴、腾讯、滴滴、今日头条、360安全、小米等诸多知名公司都在...[2021/4/12]

Cerebro是Elasticsearch 版本5.x 以前插件 Elasticsearch Kopf 的演变，可以通过图形界面查看分片分配和执行常见的索引操作。完全开源，需要依赖 Java 1.8 或更高版本才能运行。 1. 工具信息 项目 ...[2021/3/8]

Cerebro 是 Elasticsearch 版本5.x 以前插件 Elasticsearch Kopf 的演变，可以通过图形界面查看分片分配和执行常见的索引操作。完全开源，需要依赖 Java 1.8 或更高版本才能运行。   1. 工具信息 项目 说明...[2021/3/8]

自建博客地址：https: www.bytelife.net，欢迎访问！ 本文为博客同步发表文章，为了更好的阅读体验，建议您移步至我的博客?? 本文作者： Jeffrey 本文链接： https: www.bytelife.net/article 51440.html 版权声明： 本博...[2021/3/8]

原文 1. 背景 shard allocation 意思是分片分配, 是一个将分片分配到节点的过程; 可能发生该操作的过程包括: 初始恢复(initial recovery) 副本分配(replica allocation) 重新平衡(rebalance) 节点的新增和删除 来源 分片...[2021/3/8]

若进行博客等文本类数据的读写以及专业搜索引擎的连接的解决方案对比，可以肯定的下结论：MongoDB的解决方案中要远远好于MySQL的解决方案。 一、从开发工序角度 MySQL的文章读写方式 方式一：文章标题、作者、标签、时间和内容存关系表，图片存OSS，地址存关系表 上述方式因为OSS...[2021/3/1]

目录如何保证数据写入过程中不丢直接落盘的 translog 为什么不怕降低写入吞吐量？如何保证已写数据在集群中不丢in-memory buffer总结LSM Tree的详细介绍参考资料 如何保证数据写入过程中不丢 数据写入请求达到时，以需要的数据格式组织并写入磁盘的过程叫做数据提交，...[2021/2/1]

原生的Rest Level Client不好用，构建检索等很多重复操作。 对bbo -elasticsearch进行了部分增强：通过注解配合实体类进行自动构建索引和自动刷入文档，复杂的业务检索需要自己在xml中写Dsl。用法与mybatis-plus如出一辙。 依赖 <d...[2021/1/25]

目录一、简介1.1 什么是Elasticsearch？1.2 Elasticsearch 的用途1.3 Elasticsearch 的工作原理1.4 Elasticsearch 索引是什么？二、 基本概念2.1 Index（索引）2.2 Type（类型）2.3 Document （文档...[2020/12/14]

0，定义esHighClient 1 @Configuration 2 public cla RestClientConfig { 3 4 类似：200.188.22.20:9300,200.188.22.21:9300 5 @Value("${spr...[2020/11/23]

一开始，在电脑上同一个集群新增节点（node）怎么试也不成功，官网guide又语焉不详？集群健康值yellow（表示主分片全部可用，部分复制分片不可用）。关于集群和多节点，有什么好处呢？ 集群和多个节点，可以提高可用性，一个挂了，可从另外一个恢复，主节点挂了，会自动从剩余节点选举出一...[2019/11/7]

基本环境 elasticsearch版本：6.3.1 客户端环境：kibana 6.3.4、Java8应用程序模块。 其中kibana主要用于数据查询诊断和查阅日志，Java8为主要的客户端，数据插入和查询都是由Java实现的。 案例介绍 使用elasticsearch存储订单的主要...[2019/11/5]

ElasticSearch7.3 允许外网访问，bootstrap checks failed,the default discovery settings are unsuitable for production use; at least one of [discovery.see...[2019/10/31]

这篇文章主要介绍了python中的Elasticsearch操作汇总,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下 导入包 from elasticsearch import Elasticsearch 本地连接 ...[2019/10/31]

这篇文章主要介绍了java操作elasticsearch的案例解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下 到目前为止，我们一直都是使用RESTful风格的 API操作elasticsearch服务，但是通过我们之前的学习知道，elas...[2019/10/30]

一、信息检索概述 1、信息过载 据百度百科介绍，信息过载是指社会信息超过了个人或系统所能接受、处理或有效利用的范围,并导致故障的状况。 信息过载有以下3个特点 （1）受传者对信息反映的速度远远低于信息传播的速度； （2）大众媒介中的信息量大大高于受众所能消费、承受或需要的信息...[2019/10/22]

Elasticsearch 的API 分为 REST Client API（http请求形式）以及 transportClient API两种。相比来说transportClient API效率更高，transportClient 是通过Elasticsearch内部RPC的形式进行请求...[2019/10/18]

目录 想想我们漏了什么 回顾 补回 集群的建立 集群发现机制 配置文件 健康状态 补充： ...[2019/10/8]

目录 1 什么是数据建模? 2 如何对 ES 中的数据进行建模 2.1 字段类型的建模方案 2.2 检索、聚合及排序的建模方案 2.3 额外存储的建模方案 ...[2019/10/8]

目录 上节回顾 本节前言 文档的搜索 URL参数条件搜索 请求体条件搜索 语法与示例： 补充： 小节总结...[2019/9/23]

前言 在上一篇中介绍了ElasticSearch集群和kinaba的安装教程，本篇文章就来讲解下 ElasticSearch的DSL语句使用。 ElasticSearch DSL 介绍 Elasticsearch提供了基于JSON的完整查询DSL（特定于域的语言）来定义查询。将查询D...[2019/9/23]

目录 上节回顾 本节前言 索引index 创建索引 查看索引 查看单个索引 查看所有索引 删除索引 ...[2019/9/20]

目录 什么是ElasticSearch 核心能力 ES的搜索核心 搜索引擎选择 搜索的处理 补充： 小节总结： ...[2019/9/19]

ElasticSearch6.3.2源码分析之节点连接实现 这篇文章主要分析ES节点之间如何维持连接的。在开始之前，先扯一下ES源码阅读的一些心得：在使用ES过程中碰到某个问题，想要深入了解一下，可源码又太多了，不知道从哪里入手，怎么办？ES启动的入口类是Elasticsearch.ja...[2019/9/2]

# ---------------------------------- Cluster ----------------------------------- # Use a descriptive name for your cluster:    # 集群...[2019/8/29]

前言 本文主要介绍的是ElasticSearch集群和kinaba的安装教程。 ElasticSearch介绍 ElasticSearch是一个基于Lucene的搜索服务器，其实就是对Lucene进行封装，提供了 REST API 的操作接口. ElasticSearch作为一个高度...[2019/8/22]

1.前言 现在elasticsearch是比较火的，很多公司都在用，所以如果说还不知道es可能就会被人鄙视了。所以这里我就下决心来学习es，我比较钟爱于docker所有也就使用了docker来安装es，这里会详细介绍下安装的细节以及需要注意的地方。关于docker的安装在这里我就不去说明了...[2019/8/22]

elasticsearch插件汇总 基于es 7.3版本试用。 一、安全插件 1、x-pack a、介绍 包括安全（x-pack-security），监视（x-pack-watcher），警报（x-pack-monitoring），报表（x-pack-graph），Elast...[2019/8/20]

目录 1 关于脚本 2 脚本使用的最佳实践 2.1 创建脚本并存储 2.2 脚本的缓存 2.3 Script Field - 脚本字段 ...[2019/8/16]

目录 1 分页查询方法 2 分页查询的deep paging问题 1 分页查询方法 在GET请求中拼接from和size参数 查询10条数据, 默认从第0条数据开始 GET bo...[2019/8/12]

拿一个小规模的5节点ES集群做冷热分离尝试，它上面已经有60多个索引，有些索引按月、每月生成一个索引，随着数据的不断写入，历史数据(只需保留三个月数据，三个月之前的数据视为历史数据)越来越占磁盘空间和内存资源，影响搜索响应时间。因此想把集群中节点分成2种类型，一种是hot节点，配置大内存...[2019/8/12]

1.https: www.oracle.com/technetwork/java/javase/download jdk12-downloads-5295953.html 在此页面下载安装JDK12，版本可能有更新 2.https: www.elastic.co/cn/downloa...[2019/8/8]

Elasticsearch 定义字段时Norms选项的作用 本文介绍ElasticSearch中2种字段(text 和 keyword)的Norms参数作用。 创建ES索引时，一般指定2种配置信息：settings、mappings。settings 与数据存储有关（几个分片、几个副本...[2019/8/5]

目录 1 普通聚合分析 1.1 直接聚合统计 1.2 先检索, 再聚合 1.3 扩展: fielddata和keyword的聚合比较 2 嵌套聚合 ...[2019/8/5]

目录 1 范围查询的符号 2 数值范围查询 3 时间范围查询 3.1 简单查询示例 3.2 关于时间的数学表达式(date-math) 3.3 关于时间的四舍五入 ...[2019/7/30]

Elasticsearch 通信模块的分析从宏观上介绍了ES Transport模块总体功能，于是就很好奇ElasticSearch是怎么把服务启动起来，以接收Client发送过来的Index索引操作、GET获取文档操作 等一系列操作的呢？本文分析：ElasticSearch6.3.2 Netty...[2019/7/22]

一、复合查询 　　1、在ElasticSearch中，有Query和Filter两种不同的Context。Query Context进行了相关性算分，Filter Context不需要进行算分，同时可以利用Cache，获取更好的性能。 　　2、bool Query：一个布尔查询，是一...[2019/7/22]

一、确认centos系统是为64位的，x86的不可以安装 1. 下载elasticsearch包 2. 用 tar -zxvf 解压包 3. 增加一个elk用户，elasticsearch7不可用root用户运行 4. 新建用户必须要用 chown -R 用户名 文件夹：进行权限分配...[2019/7/22]

一、基于词项与全文的搜索 　　1、词项 　　　　Term（词项）是表达语意的最小单位，搜索和利用统计语言模型进行自然语言处理都需要处理Term。 　　　　Term的使用说明： 　　　　1）Term Level Query：Term Query、Range Query、Exists&...[2019/7/19]

一、Mapping的概念 　　1、Mapping类似于数据库中的Schema的定义，作用如下： 　　　　1）定义索引中的字段的名称； 　　　　2）定义字段的数据类型，例如字符串、数字、日期、布尔等； 　　　　3）对每个字段进行倒排索引的建立及相关配置； 　　　　4）Mappin...[2019/7/17]

一、Index Template与Dynamic Template的概念 　　1、Index Template：它是用来根据提前设定的Mappings和Settings，并按照一定的规则，自动匹配到新创建的索引上。 　　　　1）模板仅是一个索引被创建时才会起作用，修改模板并不会影响已创建的...[2019/7/17]

Elasticsearch是一个分布式可拓展的实时搜索和分析引擎 　　分布式实时文件存储，并将每一个字段都编入索引，使其可以被搜索 　　实时分析的分布式搜索引擎 　　可以拓展到上百台服务器，处理PB级别的结构化或非结构化数据 文件存储：Elasticsearch，面向文档型数据库，...[2019/7/15]

# 检查Java版本 java -version # 安装Elasticsearch,所有节点均安装并解压 wget https: artifacts.elastic.co/download elasticsearch/elasticsearch6.3.0.tar.gz 2.tar -x...[2019/7/15]

ElasticSearch中的JVM性能调优 前一段时间被人问了个问题：在使用ES的过程中有没有做过什么JVM调优措施？ 在我搭建ES集群过程中，参照important-settings官方文档来的，并没有对JVM参数做过多的调整。其实谈JVM配置参数，少不了操作系统层面上的一些配置参数，比如 ...[2019/7/15]

本篇文章首发于头条号单机如何搭建Elasticsearch集群？使用容器技术快速构建集群环境，欢迎关注头条号和微信公众号“大数据技术和人工智能”（微信搜索bigdata_ai_tech）获取更多干货，也欢迎关注CSDN博客。 在之前的文章里分别介绍过Elasticsearch本地环境安装和常用操...[2019/7/15]