ElasticSearch深度分頁詳解
  • 2022 年 11 月 15 日
  • 筆記

1 前言 ElasticSearch是一个实时的分布式搜索与分析引擎，常用于大量非结构化数据的存储和快速检索场景，具有很强的扩展性。纵使其有诸多优点，在搜索领域远超关系型数据库，但依然存在与关系型数据库同样的深度分页问题，本文就此问题做一个实践性分析探讨 2 from + size分页方式 from …

Continue Reading

【ELK解決方案】ELK集群+RabbitMQ部署方案以及快速開發RabbitMQ生產者與消費者基礎服務
  • 2022 年 11 月 15 日
  • 筆記

前言： 大概一年多前写过一个部署ELK系列的博客文章，前不久刚好在部署一个ELK的解决方案，我顺便就把一些基础的部分拎出来，再整合成一期文章。大概内容包括：搭建ELK集群，以及写一个简单的MQ服务。 如果需要看一年多之前写的文章，可以详见下列文章链接（例如部署成Windows服务、配置浏览器插件、l …

Continue Reading

elasticsearch多欄位聚合實現方式
  • 2022 年 11 月 14 日
  • 筆記

目录 1、背景 2、实现多字段聚合的思路 3、需求 4、数据准备 4.1 创建索引 4.2 准备数据 5、实现方式 5.1 multi_terms实现 5.1.1 dsl 5.1.2 java 代码 5.1.3 运行结果 5.2 script实现 5.2.1 dsl 5.2.2 java代码 5.2 …

Continue Reading

elasticsearch聚合之bucket terms聚合
  • 2022 年 11 月 13 日
  • 筆記

目录 1. 背景 2. 前置条件 2.1 创建索引 2.2 准备数据 3. 各种聚合 3.1 统计人数最多的2个省 3.1.1 dsl 3.1.2 运行结果 3.2 统计人数最少的2个省 3.2.1 dsl 3.2.2 运行结果 3.3 根据字段值排序-根据年龄聚合，返回年龄最小的2个聚合 3.3. …

Continue Reading

京東雲開發者｜mysql基於binlake同步ES積壓解決方案
  • 2022 年 11 月 8 日
  • 筆記

1 背景与目标 1.1 背景 国际财务泰国每月月初账单任务生成，或者重算账单数据，数据同步方案为mysql通过binlake同步ES数据，在同步过程中发现计费事件表，计费结果表均有延迟，ES数据与Mysql数据不一致，导致业务页面查询数据不准确，部分核心计算通过ES校验失败 1.2目标 解决binl …

Continue Reading

ElasticSearch這些坑記得避開
  • 2022 年 11 月 4 日
  • 筆記

目录 一、管理方式 二、结构维护 三、数据调度 1、同步方案 2、中断和恢复 四、刷新策略 五、深度分页 六、参考源码 Index用不好，麻烦事不会少； 一、管理方式 ElasticSearch作为最常用的搜索引擎组件，在系统架构中发挥极其重要的能力，可以极大的提升数据的加载和检索效率；但不可否认的 …

Continue Reading

ElasticSearch之Windows中環境安裝
  • 2022 年 11 月 2 日
  • 筆記

ElasticSearch 说明 本章，我们主要以在 Windows 中对 ElasticSearch 安装 进行介绍！ 1、🍞 下载 ElasticSearch 这里我们下载的版本为 7.17.4 为例进行介绍。 下载 ElasticSearch 的地址为： //artifacts.elastic …

Continue Reading

VirMach 便宜 VPS