a亚洲精品_精品国产91乱码一区二区三区_亚洲精品在线免费观看视频_欧美日韩亚洲国产综合_久久久久久久久久久成人_在线区

首頁 > 學院 > 操作系統 > 正文

azkaban 的安裝

2024-06-28 15:59:48
字體:
來源:轉載
供稿:網友

1、安裝模式

Azkaban有三種運行模式:

1) solo servermode:最簡單的模式,數據庫內置的H2數據庫,管理服務器和執行服務器都在一個進程中運行,任務量不大項目可以采用此模式。

2) two servermode:數據庫為MySQL,管理服務器和執行服務器在不同進程,這種模式下,管理服務器和執行服務器互不影響

3) multipleexecutor mode:該模式下,執行服務器和管理服務器在不同主機上,且執行服務器可以有多個。

項目需求,使用第二種。

2、Mysql安裝及配置

       安裝教程:http://blog.csdn.net/duyuanhai/article/details/36404175

       安裝完之后啟動:

1)為Azkaban創建一個數據庫:

# Example database creation command, although the db name doesn't need to be 'azkaban'
mysql> CREATE DATABASE azkaban;

2) 為Azkaban創建一個數據庫用戶:

# Example database creation command. The user name doesn't need to be 'azkaban'
mysql> CREATE USER 'username'@'%' IDENTIFIED BY 'passWord';

3) 為用戶賦予Azkaban數據庫的增刪查改的權限:

# Replace db, username with the ones created by the PRevious steps.
mysql> GRANT SELECT,INSERT,UPDATE,DELETE ON <database>.* to '<username>'@'%' WITH GRANT OPTION;

4) 設置mysql的信息包大小,默認的太小,改大一點:

linux配置打開 mysql/conf/my.cnf :

[mysqld]
...
max_allowed_packet=1024M

5)重啟mysql:

$ sudo /sbin/service mysqld restart

3、  Azkaban Web Server安裝和配置

1) 從GitHub上下載源碼:

git clonehttps://github.com/azkaban/azkaban.git

2) build:

壓縮為tar:
./gradlew distTar
或者壓縮為zip:
./gradlew distZip
如果不是第一次building,最好先clean一下:
./gradlew clean
創建的.tar.gz 文件的目錄:例如/azkaban-web-server/build/distributions/azkaban-web-server-3.1.0.tar.gz. cp /opt/azkaban/azkaban-*/build/distributions/*.tar.gz  /opt.

3) 解壓縮

cd /opt
 tar zxvf azkaban-exec-server-3.1.0.tar.gz
 tar zxvf azkaban-web-server-3.1.0.tar.gz
 tar zxvf azkaban-sql-3.1.0.tar.gz

4) 將azkaban sql表結構導入mysql

mysql> use azkaban;
mysql> source /opt/azkaban-sql-3.1.0/create-all-sql-3.1.0.sql

5)配置keystore

azkaban-web-server-3.1.0$ keytool -keystore keystore -alias jetty -genkey -keyalg RSA
輸入密鑰庫口令
密鑰庫口令太短 - 至少必須為 6 個字符
輸入密鑰庫口令
再次輸入新口令: 
您的名字與姓氏是什么?
[Unknown]:  firstName
您的組織單位名稱是什么?
[Unknown]:  companyName
您的組織名稱是什么?
[Unknown]:  groupName
您所在的城市或區域名稱是什么?
[Unknown]:  beijing
您所在的省//自治區名稱是什么?
[Unknown]:  beijing
該單位的雙字母國家/地區代碼是什么?
[Unknown]:  CN
CN= firstName, OU= companyName, O= groupName, L=beijing, ST=beijing, C=CN是否正確?[]:  Y
以上配置完成之后會在當前目錄生成一個keystore文件。以下配置會用到。

6) 配置conf/azkaban.properties:

         如果Azkaban WebServer下面沒有conf目錄,將azkaban-solo-web 下的conf目錄拷貝過來,并作以下配置:

cat conf/azkaban.properties 
# Azkaban Personalization Settings
azkaban.name=Test
azkaban.label=My Local Azkaban
azkaban.color=#FF3601
azkaban.default.servlet.path=/index
web.resource.dir=web/
default.timezone.id=America/Los_Angeles
# Azkaban UserManager class
user.manager.class=azkaban.user.xmlUserManager
user.manager.xml.file=conf/azkaban-users.xml
# Loader for projects
executor.global.properties=conf/global.properties
azkaban.project.dir=projects
database.type=mysql
mysql.port=3306
mysql.host=localhost
mysql.database=azkaban
mysql.user=azkaban
mysql.password=azkaban
mysql.numconnections=100
# Velocity dev mode
velocity.dev.mode=false
# Azkaban Jetty server properties.
jetty.maxThreads=25
jetty.ssl.port=8443
# jetty.use.ssl=false
jetty.port=8081
jetty.keystore=keystore
jetty.password=azkaban
jetty.keypassword=azkaban
jetty.truststore=keystore
jetty.trustpassword=azkaban
jetty.excludeCipherSuites=SSL_RSA_WITH_DES_CBC_SHA,SSL_DHE_RSA_WITH_DES_CBC_SHA,SSL_DHE_DSS_WITH_DES_CBC_SHA,SSL_RSA_EXPORT_WITH_RC4_40_md5,SSL_RSA_EXPORT_WITH_DES40_CBC_SHA,SSL_DHE_RSA_EXPORT_WITH_DES40_CBC_SHA,SSL_DHE_RSA_WITH_3DES_EDE_CBC_SHA,SSL_DHE_DSS_WITH_3DES_EDE_CBC_SHA,TLS_DHE_RSA_WITH_AES_256_CBC_SHA256,TLS_DHE_DSS_WITH_AES_256_CBC_SHA256,TLS_DHE_RSA_WITH_AES_256_CBC_SHA,TLS_DHE_DSS_WITH_AES_256_CBC_SHA,TLS_DHE_RSA_WITH_AES_128_CBC_SHA256,TLS_DHE_DSS_WITH_AES_128_CBC_SHA256,TLS_DHE_RSA_WITH_AES_128_CBC_SHA,TLS_DHE_DSS_WITH_AES_128_CBC_SHA
# Azkaban Executor settings
executor.port=12321
# mail settings
mail.sender=
mail.host=
job.failure.email=
job.success.email=
lockdown.create.projects=false
cache.directory=cache
# JMX stats
jetty.connector.stats=true
executor.connector.stats=true

注意:

配置的默認時區是:default.timezone.id=America/Los_Angeles修改為:default.timezone.id=Asia/Shanghai

7) 用戶設置

進入 azkaban web 服務器 conf 目錄,修改 azkaban-users.xml ,增加管理員用戶:
<azkaban-users><userusername="azkaban"password="azkaban"roles="admin"groups="azkaban" /><userusername="metrics"password="metrics"roles="metrics"/><userusername="admin"password="admin"roles="admin,metrics" /><rolename="admin"permissions="ADMIN" /><rolename="metrics"permissions="METRICS"/></azkaban-users>

8) 啟動azkaban web服務器

cd /opt/azkaban-web-server-3.1.0/
bin/azkaban-web-start.sh
報錯:Exception: java.lang.StackOverflowError thrown from the UncaughtExceptionHandler in thread "main"

解決方式:在Azkaban-web-server的conf目錄下創建文件夾conf/log4j.properties:

log4j.rootLogger=INFO,C
log4j.appender.C=org.apache.log4j.ConsoleAppender
log4j.appender.C.Target=System.err
log4j.appender.C.layout=org.apache.log4j.PatternLayout
log4j.appender.C.layout.ConversionPattern=%d{yyyy-MM-dd HH:mm:ss} %-5p %c{1}:%L - %m%n

 

9) 訪問驗證https://192.168.0.61:8443/

 

 

4、  Azkaban Executor Server 安裝和配置

進入azkaban-executor-server目錄,將azkaban-web-server下的conf目錄拷貝到

該目錄下

1)      配置executor端的azkaban.properties

# Azkaban
 default.timezone.id=America/Los_Angeles
# Azkaban JobTypes Plugins
 azkaban.jobtype.plugin.dir=plugins/jobtypes
# Loader for projects
 executor.global.properties=conf/global.properties
 azkaban.project.dir=projects
database.type=mysql
mysql.port=3306
mysql.host=localhost
mysql.database=azkaban
mysql.user=azkaban
mysql.password=azkaban
mysql.numconnections=100
# Azkaban Executor settings
executor.maxThreads=50
executor.port=12321
executor.flow.threads=30
# JMX stats
jetty.connector.stats=true
executor.connector.stats=true
# uncomment to enable inmemory stats for azkaban
#executor.metric.reports=true
#executor.metric.milisecinterval.default=60000

2) 啟動執行服務器:

bin/azkaban-executor-start.sh
發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: 禁果av一区二区三区 | 日韩中文一区二区三区 | 中文字幕一区二区三区乱码图片 | 日韩欧美中文在线 | 91在线免费看 | 欧美一区二区视频 | 日本福利网站 | 日本精品在线视频 | 高清三区 | 三级av网站 | 美欧一级片| 国产私拍视频 | 精品伦理一区二区三区 | 中文幕av一区二区三区佐山爱 | 欧美色婷婷 | 亚洲精品一区二区三区在线看 | 九九九九九九精品 | 日韩精品一区二区三区老鸭窝 | 免费看特级毛片 | julia一区二区中文久久94 | 免费看片91 | 精品www| 男女国产网站 | 国产精品久久久久久久久久久久午夜片 | 精品99久久久久久 | 羞羞在线视频 | 久久噜噜噜精品国产亚洲综合 | 热久久免费视频 | 美足av | 免费成人在线网站 | 久久久麻豆| 九九热精品在线观看 | 欧美日韩成人在线 | 色久视频 | 青草精品| 久久久国产精品免费 | 色婷婷综合久久久久中文一区二区 | 亚洲爽爽 | 精产国产伦理一二三区 | 亚洲精品一区二区另类图片 | 精品国产三级a在线观看 |