分布式调度框架。
You can not select more than 25 topics Topics must start with a letter or number, can include dashes ('-') and can be up to 35 characters long.
 
 
 
 
 
 

3.2 KiB

Dolphin Scheduler的Ambari插件使用说明

备注
  1. 本文档适用于对Ambari中基本了解的用户
  2. 本文档是对已安装Ambari服务添加Dolphin Scheduler(1.3.0版本)服务的说明
一 安装准备
  1. 准备RPM包

    • 在项目根目录下执行命令mvn -U clean install -Prpmbuild -Dmaven.test.skip=true -X即可生成(在目录 dolphinscheduler-dist/target/rpm/apache-dolphinscheduler-incubating/RPMS/noarch 下)
  2. 创建DS的安装用户--安装目录(/opt/soft)有读写权限

  3. rpm安装

    • 手动安装(推荐):
      • copy准备的rpm包到集群的各个节点
      • 用DS的安装用户执行: rpm -ivh apache-dolphinscheduler-incubating-xxx.noarch.rpm
    • ambar自动安装
      • 集群的各个节点需要配置本地yum源
      • copy准备的rpm包到各个节点本地yum源
  4. copy插件目录

    • copy目录ambari_plugin/common-services/DOLPHIN到ambari-server/resources/common-services/下
    • copy目录ambari_plugin/statcks/DOLPHIN到 ambari-server/resources/stacks/HDP/2.6/services/下--stack版本2.6根据实际情况选择
  5. 初始化数据库信息

    -- 创建Dolphin Scheduler的数据库:dolphinscheduler
    CREATE DATABASE dolphinscheduler DEFAULT CHARACTER SET utf8 DEFAULT COLLATE
    utf8_general_ci;
    
    -- 初始化dolphinscheduler数据库的用户和密码,并分配权限
    -- 替换下面sql语句中的{user}为dolphinscheduler数据库的用户
    GRANT ALL PRIVILEGES ON dolphinscheduler.* TO '{user}'@'%' IDENTIFIED BY '{password}';
    GRANT ALL PRIVILEGES ON dolphinscheduler.* TO '{user}'@'localhost' IDENTIFIED BY
    '{password}';
    flush privileges;
    
二 Ambari安装Dolphin Scheduler
  1. Ambari界面安装Dolphin Scheduler

  2. 选择Dolphin Scheduler的Master安装的节点

  3. 配置Dolphin Scheduler的Worker、Api、Logger、Alert安装的节点

  4. 设置Dolphin Scheduler服务的安装用户(步骤一中创建的)及所属的用户组

  5. 配置数据库的信息(和步骤一中初始化数据库中一致)

  6. 配置其它的信息--如果需要的话

  7. 正常执行接下来的步骤

  8. 安装成功后的界面