微博AnalysisQl動態數據視圖元數據設計
- 2020 年 8 月 11 日
- 筆記
前言 目前，AnalysisQl 数据视图的元数据（维度、指标、指标计算器）需要通过代码（API）或资源文件的形式硬编码，应用启动时，按照声明的顺序依次注册。这种模式下，数据视图是 静态 的，任何一项变更都需要重新升级发布应用服务，不利于服务快速迭代。 考虑到这种情况，AnalysisQl 在保留原 …
Continue Reading
微博大數據即席查詢（OLAP）引擎實踐
- 2020 年 7 月 13 日
- 筆記
前言 适用于 即席查询 场景的开源查询引擎有很多，如：Elasticsearch、Druid、Presto、ClickHouse等；每种系统各有利弊，有的擅长检索，有的擅长统计；实践证明， All In One 是行不通的，最好的方式是选取若干个（考虑运维成本，建议 1 ~ 3 个），每个都对应着自 …
Continue Reading