Startseite Erkunden Hilfe
Registrieren Anmelden
sxwl_DL
/
datax-admin
1
0
Fork 0
Dateien Issues 0 Pull-Requests 0 Wiki

Keine Beschreibung

Struktur: 059e36c1ad
Branches Tags
datax-admin
ZIP TAR.GZ
liweiquan 059e36c1ad Merge branch 'master' of http://gogsb.soaringnova.com/sxwl_DL/datax-admin vor 2 Jahren
app 0073c19959 - vor 2 Jahren
assets 91c31d6b1f test new kebtab vor 2 Jahren
auo_tests 48528f3914 1. 修复了kinit -kt /workspace/conf/user.keytab ailab 在本地环境 不需要调用的逻辑 vor 2 Jahren
configs c20248fe2b 1. 更新日志方式获取方式 k8s-》airflow vor 2 Jahren
constants 938a43be42 增加库名 vor 2 Jahren
dag 38bd314365 新增dag文件 vor 2 Jahren
data cd70627e55 增加use_ssl vor 2 Jahren
docker 9ee0f52a71 update dockerfile vor 2 Jahren
utils 1ad7206b6c 1. 完成基础work,job的构建 vor 2 Jahren
.gitignore b6a68d2490 init vor 2 Jahren
Dockerfile 1a89d8f896 update dockerfile vor 2 Jahren
Makefile 9ee0f52a71 update dockerfile vor 2 Jahren
README.md 049a1dff52 update deploy vor 2 Jahren
debug.ipynb 48528f3914 1. 修复了kinit -kt /workspace/conf/user.keytab ailab 在本地环境 不需要调用的逻辑 vor 2 Jahren
development.ini ac701985d6 add ssl_disabled mysql vor 2 Jahren
docker-compose.yml 41755c8067 update vor 2 Jahren
environment.yml 72ae981493 add mysql-connector-python==8.0.29 vor 2 Jahren
production.ini ac701985d6 add ssl_disabled mysql vor 2 Jahren
rdbms-example.json 6f0793d275 datax json mysql vor 2 Jahren
rdbms-template.json 6f0793d275 datax json mysql vor 2 Jahren
render_script_to_dag_manual.ipynb 3bb8fa5643 1. 添加了任务触发函数接口 vor 2 Jahren
requirements.txt 2694cd54a3 1. 完成基础run的构建 vor 2 Jahren
run.py d12923e2bf 1. 完成日志的格式化输出 vor 2 Jahren
server.py 2ec098373e 判断kerberos文件夹是否存在 vor 2 Jahren

README.md

Datax Admin

用于 dag 平台:

  • 数据源管理
  • 任务管理
  • 用户管理
  • 权限管理

启动

conda env create environment.yml
conda activate py38
python run.py

部署

在 k8s 生产环境设置 pod 的环境变量 APP_ENV=production

# 打包镜像
make image

# 打包镜像 + 用docker-compose启动容器
make deploy

# 在远程服务器的 REMOTE_WORKSPACE 下部署
make remote