基於雲服務MRS構建DolphinScheduler2調度系統

  • 2022 年 5 月 28 日
  • 筆記

摘要: 本文介绍如何搭建DolphinScheduler并运行MRS作业。 本文分享自华为云社区《 基于云服务MRS构建DolphinScheduler2调度系统 》,作者: 啊喔YeYe 。 为什么写这篇文章? 网上关于DolphinScheduler的介绍很多但是都缺少了与实际大数据平台结合的案 …

Continue Reading

incubator-dolphinscheduler 如何在不寫任何新程式碼的情況下,能快速接入到prometheus和grafana中進行監控

  • 2021 年 3 月 15 日
  • 筆記

一、prometheus和grafana 简介 prometheus是由谷歌研发的一款开源的监控软件,目前已经贡献给了apache 基金会托管。 监控通常分为白盒监控和黑盒监控之分。 白盒监控:通过监控内部的运行状态及指标判断可能会发生的问题,从而做出预判或对其进行优化。 黑盒监控:监控系统或服务, …

Continue Reading

聯童科技基於incubator-dolphinscheduler從0到1構建大數據調度平台之路

  • 2021 年 2 月 20 日
  • 筆記

联童科技是一家智能化母婴童产业平台,从事母婴童行业以及互联网技术多年,拥有丰富的母婴门店运营和系统开发经验,在会员经营和商品经营方面,能够围绕会员需求,深入场景,更贴近合作伙伴和消费者,提供最优服务产品,公司致力于以技术来驱动母婴童产业的发展,公司也希望借助于大数据为客户提供更多智能数据分析和决策分 …

Continue Reading

centos7搭建dolphinscheduler集群

  • 2021 年 1 月 24 日
  • 筆記

一、简述 Apache DolphinScheduler是一个分布式去中心化,易扩展的可视化DAG工作流任务调度系统。致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在数据处理流程中开箱即用。有如下特性: 高可靠性 去中心化的多Master和多Worker, 自身支持HA功能, 采用任务队列来 …

Continue Reading