DolphinScheduler的Master节点掉线问题排查

这篇具有很好参考价值的文章主要介绍了DolphinScheduler的Master节点掉线问题排查。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

问题描述:周一早上,发现DolphinScheduler的任务执行时间停留在了上周五,再一看,Master节点全部掉线。
解决步骤:
1.重启DolphinScheduler,提示dolphinscheduler-master-server-hadoop001.out 和 dolphinscheduler-master-server-hadoop002.out 没权限。

dolphinscheduler无可用master节点,服务器,运维,dolphin,数据仓库

2.给dolphinscheduler-master-server-hadoop001.out 和 dolphinscheduler-master-server-hadoop002.out 所属用户修改为 dolphinscheduler,

chown dolphinscheduler:dolphinscheduler   dolphinscheduler-master-server-hadoop002.out 

再次重启。
dolphinscheduler无可用master节点,服务器,运维,dolphin,数据仓库
3.将/opt/module/dolphinscheduler/logs/ 下所有文件,所属用户都修改为 dolphinscheduler,

chown dolphinscheduler:dolphinscheduler   dolphinscheduler-*

再再次重启。

dolphinscheduler无可用master节点,服务器,运维,dolphin,数据仓库
4.启动成功。

PS:一定要注意,启动时要切换成dolphinscheduler用户,我之前偶尔会用root启动,启动完文件所属组会变成root,掉线后用dolphinscheduler启用就会提示没权限。文章来源地址https://www.toymoban.com/news/detail-675943.html

到了这里,关于DolphinScheduler的Master节点掉线问题排查的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 【DolphinScheduler】datax读取hive分区表时,空分区、分区无数据任务报错问题解决

    最近在使用海豚调度DolphinScheduler的Datax组件时,遇到这么一个问题:之前给客户使用海豚做的离线数仓的分层搭建,一直都运行好好的,过了个元旦,这几天突然在数仓做任务时报错,具体报错信息如下: com.alibaba.datax.common.exception.DataXException: Code:[HdfsReader-08], Description:[您尝

    2024年01月16日
    浏览(67)
  • 【大数据进阶第三阶段之DolphinScheduler学习笔记】DolphinScheduler(海豚调度)的部署指南

    参考官网部署方式:https://dolphinscheduler.apache.org/zh-cn/docs/3.1.3/guide/installation/standalone 部署方式:单机部署,伪集群部署,集群部署。 如果是新手,想要体验 DolphinScheduler 的功能,推荐使用Standalone方式体检。如果你是在生产中使用,推荐使用 集群部署或者 kubernetes。 Standalone

    2024年01月22日
    浏览(42)
  • DolphinScheDuler配置

    一、配置前置准备工作 JDK:下载JDK (1.8+),安装并配置 二进制包:在下载页面下载 DolphinScheduler 二进制包 数据库:PostgreSQL (8.2.15+) 或者 MySQL (5.7+),两者任选其一即可,如 MySQL 则需要 JDBC Driver 8.0.16 注册中心:ZooKeeper (3.4.6+) 二、创建配置用户免密登录以及权限 useradd dolphinsc

    2024年02月08日
    浏览(38)
  • dolphinscheduler部署排错记录

    问题出现场景: ​ 在部署完ui, worker, master, api四个模块之后,随手建了一个工作流,点击运行的时候,在master节点上出现这个报错。 发送方发送的消息和接收方接收的消息格式不一致,导致报的这个错,但是程序在本地环境上打包成镜像是可以正常跑流程的,部署到K8S之后

    2024年01月21日
    浏览(34)
  • 解决Dolphinscheduler跨任务流依赖

            最近在用Dolphinscheduler搭建一个数据中台,刚把ODS层的接口抽数任务部署好,现在在开发DWD层的任务,需要新建一个DWD层的任务流,方便和ODS层接口任务流区分开,这就涉及到一个问题,因为DWD层的任务用到了ODS层的表,所以要等到ODS层任务跑完之后再调度DWD层的

    2024年02月11日
    浏览(31)
  • DolphinScheduler 3.1.4详细教程

    第一章 DolphinScheduler介绍 1.1 关于DolphinScheduler Apache DolphinScheduler 是一个分布式易扩展的可视化DAG工作流任务调度开源系统。适用于企业级场景,提供了一个可视化操作任务、工作流和全生命周期数据处理过程的解决方案。 Apache DolphinScheduler 旨在解决复杂的大数据任务依赖关系

    2024年02月05日
    浏览(36)
  • 数仓工具——DolphinScheduler任务调度工具

    在数仓项目中,掌握一种任务调度工具是十分重要的,常用的调度工具有Azkaban和oozie,这里学习一种国产的调度工具,DolphinScheduler,综合了两种调度工具的特点而产生的。 DolphinScheduler是一个分布式、易扩展的可视化DAG工作流调度平台,致力于解决数据处理流程中错综复杂的

    2023年04月15日
    浏览(45)
  • Dolphinscheduler 3.0 windows 部署手册

    Dolphinscheduler作为国人开源的一款分布式ETL调度工具在2022年4月发布了最新的3.0版本,在健壮性和功能的丰富度上相较之前的版本都有了较大的提高。工作和实际生产中从稳定性的角度我们一般采用基于centOS或者其他版本Linux的集群部署或者K8S部署。因为工作中缺少合适的Linu

    2024年02月06日
    浏览(47)
  • dolphinscheduler docker compose安装配置

    database init .env docker-compose.yml

    2024年02月09日
    浏览(42)
  • Kubernetes 部署DolphinScheduler 创建租户失败

    报错创建租户失败。后台日志如下 源代码跟踪 org.apache.dolphinscheduler.api.service.impl.TenantServiceImpl 需要将 resource.storage.type 置为 NONE, 因为我之前用的 1.3.6 版本的时候,即使资源文件存在本地文件也需要配置成 hdfs。 但是此时如果配置成 NONE, 租户创建成功了,但是无法创建资源文

    2024年02月13日
    浏览(44)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包