gambit安装步骤,gambit2.4.6安装教程
1、DS源代码编译1.1帕切孵化项目后的鐽最新稳定版本为1.3.4,提供弗林克持有,我们1.3.4就可以了
1https://github.com/Apache/incubator-dolphin计划程序/版本1.2克隆代码1吉特克隆https://github.com/Apache/incubator索性根据1.3.4点制作低压聚乙烯点,进行编译
1.3.1HDP分1cd孵化器-海豚调度器2git检出1.3.43吉特检出-b 1。3 .4-HDP 3。1 .4 .4 .4 .0 .0 .1 .三层蜂巢.JDBC.version2.1.0/hive .JDBC.version - 4hive .JDBC.version3.1.0/hive .JDBC.version 3358 ww版本1.3.3软件包1 mvn-核仁包-预发布的编译和安装
1架阿帕奇-海豚调度程序-孵化-1.3.4-HDP3.1.4.0-海豚调度程序-不安的冬天。tar.gz 2,DS快速安装2.1部署http://www .Sina.com/http://www.Sina.com/3358 www.Sina.com/3358 www.Sina.com http://www.Sina.com/com 2.2后端部署2.2.1依赖组件是否安装了PostgreSQL(8.2.15 ) ormyyl直接安装安巴里JDK 1.8必须安装MySQL5.7。动物园管理员需要安装HDP。Hadoop ) 2.6)必须安装或者米尼奥选项。如果需要使用资源上传功能、Hadoop或MinIoHDP可以选择蜂巢)1。储备任务提交需要安装低压聚乙烯磁带火花(1.x,2.x)选项,火花任务
2.2.2准备修改顶层pom.xml1在需要部署时间表的所有计算机上创建部署用户。由于工人服务以sudo-u{linux-user}格式执行工作,因此部署用户必须具有日本首藤权限,并且必须是无机密的。 2我们直接招聘大数据用户就可以了。早就做好了避免秘密3358 www.Sina.com/1 MySQL-乌鲁特-P1设置全局验证密码策略=0;2设置全局validate _ password _ mixed _ case _ count=0;3设置全局验证密码数量计数=3;四设置全局validate _ password _ special _ char _ count=0;5设置全局验证密码长度=3;6创建数据库dolphinschedulerdefaultcharacterset utf 8默认排序规则_常规_ ci8创建由" ds3 "标识的用户“ds”@“%”;9 grantallprivilegesondolphinscheduler .*到" ds "
%identifiedbyds3;10 grantallprivilegesondolphinscheduler .*tods@localhostidentifiedby11ds3;12刷新权限;13退出;2.2.3 正式部署解压缩安装包上传后端安装包到hadoop户主录下阿帕奇海豚调度程序-孵化-1 .3 .4-HDP 3。1 .4 .0-dolphin计划程序-不安的冬天。tar.gz
1 mvapache-dolphin调度程序-孵化-1 .3 .4-HDP 3。1 .4 .0-dolphin计划程序-不安的冬天。焦油。gzapp/2c dapp 3 tar-zxvfapache-dolphin调度程序-孵化-1 .3 .4-HDP 3。1 .4 .0-dolphin计划程序-不安的冬天。焦油。gz4ln-sa缓存-dolphin调度程序-孵化-1 .3 .4-HDP 3。1 .4 .0-dolphin计划程序-不安的冬天5 dolphin调度程序6 chmodugo xdolphin调度程序/不安的冬天/* 7 chmodugo xdolphin调度程序/script/* 8 chmodugo xdolphin调度程序/install。sh 9 chmodugo x/home/Hadoop/app/dolphin scheduler/conf/env/dolphin scheduler _ env。sh录结构如下1 -不安的冬天#基础服务启动脚本2 -会议号配置件录3 -免责声明-在制品4 - install.sh#键部署脚本5 - lib#项依赖冲突包,包括各个模块冲突和第三jar 6 -许可证7 -许可证8 -通知9 -脚本#集群启动、停和服务监控启停脚本10 - sql#sql件数据库配置vi /home/hadoop/app/dolphinscheduler/conf/datasource.properties
1 #弹簧。数据来源。驱动程序类别名称=组织。PostgreSQL。驱动器2 #弹簧。数据来源。URL=JDBC:PostgreSQL://192.168。xx。xx:5432/dolphin调度器3 # MySQL 4 spring。数据来源。driver-class-name=comMySQL。JDBC。驾驶员5弹簧。数据来源。URL=JDBC:MySQL://node 01:3306/dolphin调度器?6useUnicode=true独特的日记本=utf-87spring.datasource.username=ds8spring.datasource.password=ds3初始化数据库1cd/home/Hadoop/app/dolphin scheduler/lib/2ln-s/usr/share/Java/MySQL-connector-Java-8。0 .18 .连接器-Java-8。0 .18 .jar3cd/home/Hadoop/app/dolphin scheduler 4 sh/script/create-dolphin scheduler。sh配置DS环境变量件
1导出Hadoop _ HOME=/usr/HDP/当前/Hadoop-client 2导出Hadoop _ CONF _ DIR=/etc/Hadoop/conf 3 #导出spark _ HOME 1=/opt/soft/spark 1 4导出spark _ HOME 2=/usr/HDP/当前/spark 2-client 5导出python _ HOME=/usr/不安的冬天/python 6导出Java _ HOME=/usr/local/JDK 7导出hive _ HOME=/usr/HDP/current/hive-client 8 #导出flink _ HOME=/HOME/HADOOP/app/flink 9 #导出10 path=$ HADOOP _ HOME/不安的冬天:$SPARK_HOME1/不安的冬天:$SPARK_HOME2/不安的冬天:$PYTHON_HOME:$JAVA_HOME11/不安的冬天:$HIVE_HOME/不安的冬天:$PATH:$FLINK_HOME/不安的冬天:$ path 12 export 13 path=$ HADOOP _ HOME/不安的冬天:$SPARK_HOME2/不安的冬天:$PYTHON_HOME:$JAVA_HOME/不安的冬天:$HIVE_HOME/b14in:$PATH
郑重声明:本文由网友发布,不代表盛行IT的观点,版权归原作者所有,仅为传播更多信息之目的,如有侵权请联系,我们将第一时间修改或删除,多谢。