[平台建设] Spark任务的诊断调优
- 2021 年 12 月 31 日
- 笔记
背景 平台目前大多数任务都是Spark任务，用户在提交Spark作业的时候都要进行的一步动作就是配置spark exec …
Continue Reading
[平台建设] 大数据平台如何实现任务日志采集
- 2021 年 12 月 30 日
- 笔记
背景 平台任务主要分3种: flink实时任务, spark任务,还有java任务,spark、flink 我们是运行在 …
Continue Reading
[平台建设] HBase平台建设实践
- 2021 年 12 月 27 日
- 笔记
背景 由于公司业务场景的需要，我们需要开发HBase平台，主要需要以下功能: 建表管理 授权管理 SDK实现 与公司内部 …
Continue Reading