发简信
IP属地：海南
-
-
@且汐汐 自己上zk创建即可。
ClickHouse 数据迁移[remote表、clickhouse-copier]
一、 clickhouse-copier 1、what's this？ clickhouse-copier是官方出的用来同步数据的工具，依赖zk来满足跨集群同步数据的场景。 ...
-
Spring @Configuration 注解介绍
提前说明: 下文是我根据官方文档进行自己的描述和扩展, 写下来了我觉得比较值得关注的地方, 并附带了自己的介绍, 并不是原封不动的拿过来了api翻译了下,越往后越精彩 指示一...
-
关于在springboot中使用maven的profile打包，无法替换application.properties中 ${} 占位符的问题前言： 最近在项目中使用springboot时发现，采用在pom中定义不同的profile，并且maven打包时 采用-P参数并不能替换我application.proper...
-
ClickHouse MergeTree变得更像LSM Tree了？——Polymorphic Parts特性浅析前言 笔者在之前的文章中已经提到过，MergeTree引擎族是ClickHouse强大功能的基础。MergeTree这个名词是在我们耳熟能详的LSM Tree之上做减法而来—...
-
ClickHouse遇见RoaringBitmap
Q&A Q：如图。 A：当然是自带的。其实RoaringBitmap正是ClickHouse位图的底层实现（笑 RoaringBitmap的预备知识请见这里。 在CH中产生位...
-
LSM Tree-Based存储引擎的compaction策略（feat. RocksDB）前言 这篇从半个月前就开始写，断断续续写到现在，终于能发了（被简书吞了好几次），不容易。 最近笔者正在补习与RocksDB底层相关的细节，因为： 次要原因——当前所有Flin...
-
@技术文章收集 可以
ClickHouse 数据存储架构优化
一、背景 当我进组的时候，当时的ClickHouse的版本还是在1.x的时代，partition还不支持自定义，只能按月来划分。我们组内的数据存储还是按天来分表设计，例如“X...
-
ClickHouse MaterializedView TTL
当我们在使用物化视图的时候，不可避免的也会遇到需要删除历史数据的需求。由于TTL的特性只支持MergeTree家族不支持物化视图，难道我们就没有其他办法了嘛？当我们原先创建的...
-
深入学习二叉树(一) 二叉树基础前言 树是数据结构中的重中之重，尤其以各类二叉树为学习的难点。一直以来，对于树的掌握都是模棱两可的状态，现在希望通过写一个关于二叉树的专题系列。在学习与总结的同时更加深入的了...
-
解读ClickHouse日志中的SQL查询计划
截至目前，ClickHouse并未在正式版本中提供查看查询计划的原生EXPLAIN语法。虽然GitHub上对应的Pull Request已经实现了，但是还没有发布（注：最近已...
-
ElasticsSearch 源码编译&启动1、准备 idea elasticsearch源码包，可以直接从github上下载。本文使用v7.8.0 gradle，需要v6.5+ jdk，需要jdk12+ 已经部署了e...
-
ClickHouse 高阶函数
先来一个完整的例子，该示例根据行为日志计算用户访问的top路径select data, count(1) cn from (with maxIf( c_t , cat=...
-
ElasticSearch 自定义plugin来控制rebalance触发时间1、backgroupd ElasticSearch有提供丰富的plugin接口，我们自己能实现plugin来自定义需求。 我们的ElasticSearch是用来做时序性分析...
-
@bellengao 理论上只会写入当前小时的分片才对呀，按天分片的index可以视为冷index了，影响的应该只是reindex的速度。
High cardinality下对持续写入的Elasticsearch索引进行聚合查询的性能优化
High cardinality下对持续写入的Elasticsearch索引进行聚合查询的性能优化 背景 最近使用腾讯云Elasticsearch Service的用户提出，...
-
基于ClickHouse的用户行为（路径）分析实践前言 ClickHouse为用户提供了丰富的多参聚合函数（parametric aggregate function）和基于数组+Lambda表达式的高阶函数（higher-...
-
PB级大规模Elasticsearch集群运维与调优实践背景 某中型互联网公司的游戏业务，使用了腾讯云的Elasticsearch产品，采用ELK架构存储业务日志。因为游戏业务本身的日志数据量非常大(写入峰值在100w qps)，...
-
那个按天分的index需要配置eager_global_ordinals吧？这样好像就可以了。
High cardinality下对持续写入的Elasticsearch索引进行聚合查询的性能优化
High cardinality下对持续写入的Elasticsearch索引进行聚合查询的性能优化 背景 最近使用腾讯云Elasticsearch Service的用户提出，...
-
你好，请问下，那如果查询到的index是以天为单位的index（查询几个小时之前的数据），那个index上面的cardinality依旧很高，好像没办法解决啊？
在低版本上面的execute_hit的bug问题好像有个办法可以绕过去，之前哪里看到忘记了😂High cardinality下对持续写入的Elasticsearch索引进行聚合查询的性能优化
High cardinality下对持续写入的Elasticsearch索引进行聚合查询的性能优化 背景 最近使用腾讯云Elasticsearch Service的用户提出，...
