- 众所周知，由于对象存储的架构限制，要想检索对象存储里的文件，只能使用前缀的方式过滤，然后一页一页的列举，限制多，效率低，要是桶内对象实在太多，可能光列举就要列举一两天。你可能会问，不少大公司的一个桶里都是几亿几十亿的对象，那他们都是怎么检索的呢？很简单但很有效的方案——在上传对象时候把对象信息存到其他数据库里，如 Elasticsearch、MongoDB、MySOL 等，然后在数据库里检索... 众所周知，由于对象存储的架构限制，要想检索对象存储里的文件，只能使用前缀的方式过滤，然后一页一页的列举，限制多，效率低，要是桶内对象实在太多，可能光列举就要列举一两天。你可能会问，不少大公司的一个桶里都是几亿几十亿的对象，那他们都是怎么检索的呢？很简单但很有效的方案——在上传对象时候把对象信息存到其他数据库里，如 Elasticsearch、MongoDB、MySOL 等，然后在数据库里检索...
- 1 容器化日志收集方案日志系统的重要度不言而喻，开发、测试、用户体验等都与其密切相关。本文以k8s下ELKB日志采集方案为例，详细介绍如何在华为云上一步一步搭建基于ELK的容器化采集服务，并分析在日志采集业务中可能遇到的一些问题。 1.1 ELKB方案说明日志包含系统日志、应用服务日志、访问日志等，以往若需要查看日志需登录系统设备，通过vim、cat等方式查看，操作繁琐、定位问题困难。费事... 1 容器化日志收集方案日志系统的重要度不言而喻，开发、测试、用户体验等都与其密切相关。本文以k8s下ELKB日志采集方案为例，详细介绍如何在华为云上一步一步搭建基于ELK的容器化采集服务，并分析在日志采集业务中可能遇到的一些问题。 1.1 ELKB方案说明日志包含系统日志、应用服务日志、访问日志等，以往若需要查看日志需登录系统设备，通过vim、cat等方式查看，操作繁琐、定位问题困难。费事...
- 今天，我们就来了解一下其聚合分析中较为常见的 percentiles 百分位数分析。n 个数据按数值大小排列，处于 p% 位置的值称第 p 百分位数。比如说，ElasticSearch 记录了每次网站请求访问的耗时，需要统计其 TP99，也就是整体请求中的 99% 的请求的最长耗时。 今天，我们就来了解一下其聚合分析中较为常见的 percentiles 百分位数分析。n 个数据按数值大小排列，处于 p% 位置的值称第 p 百分位数。比如说，ElasticSearch 记录了每次网站请求访问的耗时，需要统计其 TP99，也就是整体请求中的 99% 的请求的最长耗时。
- Elastic Search 的底层是开源库 Lucene。但是Lucene的使用门槛比较高，必须自己写代码去调用它的接口。而Elastic Search的出现正是为了解决了这个问题，它是 Lucene 的封装，提供了 REST API 的操作接口，我们可以开箱即用。 Elastic Search 的底层是开源库 Lucene。但是Lucene的使用门槛比较高，必须自己写代码去调用它的接口。而Elastic Search的出现正是为了解决了这个问题，它是 Lucene 的封装，提供了 REST API 的操作接口，我们可以开箱即用。
- 从零开始实施推荐系统的落地部署,这篇将教大家了解如何使用kibana做数据的可视化。 从零开始实施推荐系统的落地部署,这篇将教大家了解如何使用kibana做数据的可视化。
- 摘要：很多 DBA 和开发同学经常会遇到要从一个数据库实时同步到另一个数据库的问题，同构数据还相对容易，遇上异构数据、表多、数据量大等情况就难以同步。最近了解到一款实时数据同步工具 Tapdata Clo... 摘要：很多 DBA 和开发同学经常会遇到要从一个数据库实时同步到另一个数据库的问题，同构数据还相对容易，遇上异构数据、表多、数据量大等情况就难以同步。最近了解到一款实时数据同步工具 Tapdata Clo...
- Elasticsearch是一个基于Lucene的开源分布式搜索和分析引擎，它能够实现对大规模数据的实时全文搜索和复杂的数据分析。Elasticsearch之所以能够快速地处理海量数据的搜索和分析需求，其核心原理就在于它采用了一种称为"倒序索引"的数据结构。在接下来的内容中，我们将深入探讨Elasticsearch倒序索引的原理。 Elasticsearch是一个基于Lucene的开源分布式搜索和分析引擎，它能够实现对大规模数据的实时全文搜索和复杂的数据分析。Elasticsearch之所以能够快速地处理海量数据的搜索和分析需求，其核心原理就在于它采用了一种称为"倒序索引"的数据结构。在接下来的内容中，我们将深入探讨Elasticsearch倒序索引的原理。
- 默认情况下，Elasticsearch只能在本地主机上访问。文章主要讲述了在使用Elasticsearch时可能遇到的一个警告日志"received plaintext http traffic on an https channel"的处理方法。 默认情况下，Elasticsearch只能在本地主机上访问。文章主要讲述了在使用Elasticsearch时可能遇到的一个警告日志"received plaintext http traffic on an https channel"的处理方法。
- 背景去年下半年，我在微信书架里加入了许多技术书籍，各种类别的都有，断断续续的读了一部分。没有计划的阅读，收效甚微。新年伊始，我准备尝试一下其他方式，比如阅读周。每月抽出1~2个非连续周，完整阅读一本书籍。这个“玩法”虽然常见且板正，但是有效，已经坚持阅读三个月。4月份的阅读计划有两本，《你不知道的JavaScrip》系列迎来收尾。已读完书籍：《架构简洁之道》、《深入浅出的Node.js》、《... 背景去年下半年，我在微信书架里加入了许多技术书籍，各种类别的都有，断断续续的读了一部分。没有计划的阅读，收效甚微。新年伊始，我准备尝试一下其他方式，比如阅读周。每月抽出1~2个非连续周，完整阅读一本书籍。这个“玩法”虽然常见且板正，但是有效，已经坚持阅读三个月。4月份的阅读计划有两本，《你不知道的JavaScrip》系列迎来收尾。已读完书籍：《架构简洁之道》、《深入浅出的Node.js》、《...
- 背景去年下半年，我在微信书架里加入了许多技术书籍，各种类别的都有，断断续续的读了一部分。没有计划的阅读，收效甚微。新年伊始，我准备尝试一下其他方式，比如阅读周。每月抽出1~2个非连续周，完整阅读一本书籍。这个“玩法”虽然常见且板正，但是有效，已经坚持阅读三个月。4月份的阅读计划有两本，《你不知道的JavaScrip》系列迎来收尾。已读完书籍：《架构简洁之道》、《深入浅出的Node.js》、《... 背景去年下半年，我在微信书架里加入了许多技术书籍，各种类别的都有，断断续续的读了一部分。没有计划的阅读，收效甚微。新年伊始，我准备尝试一下其他方式，比如阅读周。每月抽出1~2个非连续周，完整阅读一本书籍。这个“玩法”虽然常见且板正，但是有效，已经坚持阅读三个月。4月份的阅读计划有两本，《你不知道的JavaScrip》系列迎来收尾。已读完书籍：《架构简洁之道》、《深入浅出的Node.js》、《...
- 背景去年下半年，我在微信书架里加入了许多技术书籍，各种类别的都有，断断续续的读了一部分。没有计划的阅读，收效甚微。新年伊始，我准备尝试一下其他方式，比如阅读周。每月抽出1~2个非连续周，完整阅读一本书籍。这个“玩法”虽然常见且板正，但是有效，已经坚持阅读三个月。4月份的阅读计划有两本，《你不知道的JavaScrip》系列迎来收尾。已读完书籍：《架构简洁之道》、《深入浅出的Node.js》、《... 背景去年下半年，我在微信书架里加入了许多技术书籍，各种类别的都有，断断续续的读了一部分。没有计划的阅读，收效甚微。新年伊始，我准备尝试一下其他方式，比如阅读周。每月抽出1~2个非连续周，完整阅读一本书籍。这个“玩法”虽然常见且板正，但是有效，已经坚持阅读三个月。4月份的阅读计划有两本，《你不知道的JavaScrip》系列迎来收尾。已读完书籍：《架构简洁之道》、《深入浅出的Node.js》、《...
- 在现代软件开发中，日志系统是至关重要的组成部分。它们不仅用于故障排查和性能监控，还可以提供关键业务洞察。本文将介绍如何利用ELK（Elasticsearch、Logstash和Kibana）与Fluentd结合，构建一个高效的分布式日志系统，并提供Python案例代码来演示其用法。 什么是ELK和Fluentd？ELK Stack：ELK是一个流行的日志管理解决方案，由三个核心组件组成：El... 在现代软件开发中，日志系统是至关重要的组成部分。它们不仅用于故障排查和性能监控，还可以提供关键业务洞察。本文将介绍如何利用ELK（Elasticsearch、Logstash和Kibana）与Fluentd结合，构建一个高效的分布式日志系统，并提供Python案例代码来演示其用法。 什么是ELK和Fluentd？ELK Stack：ELK是一个流行的日志管理解决方案，由三个核心组件组成：El...
- 在当今数据驱动的时代，能够快速、准确地存储和检索信息是企业成功的关键。Elasticsearch，作为一个分布式的、RESTful风格的搜索和分析引擎，以其强大的索引、搜索和聚合功能，成为众多企业和开发者的首选。其背后的读写流程，融合了高效的数据结构与先进的分布式系统原理，确保数据既能被可靠地存储，又能被迅速检索。 在当今数据驱动的时代，能够快速、准确地存储和检索信息是企业成功的关键。Elasticsearch，作为一个分布式的、RESTful风格的搜索和分析引擎，以其强大的索引、搜索和聚合功能，成为众多企业和开发者的首选。其背后的读写流程，融合了高效的数据结构与先进的分布式系统原理，确保数据既能被可靠地存储，又能被迅速检索。
- 华为云之Elasticsearch单机部署【玩转华为云】 华为云之Elasticsearch单机部署【玩转华为云】
- ElasticSearch实战指南必知必会：安装分词器、高级查询、打分机制 ElasticSearch实战指南必知必会：安装分词器、高级查询、打分机制
上滑加载中
推荐直播
-
极米科技的应用现代化变革之路2024/07/25 周四 14:00-16:00
极米科技CIO
作为全球智能投影行业TOP1且唯一成功上市的企业，面临严峻的市场竞争和变化，法律合规要求等挑战，极米科技如何抓住软件增值服务和粘性带来的新机遇，全面实现应用现代化。
回顾中
热门标签