Aucune description

liweiquan f8e77e295b 同上 il y a 2 ans
app f8e77e295b 同上 il y a 2 ans
assets 91c31d6b1f test new kebtab il y a 2 ans
auo_tests 48528f3914 1. 修复了kinit -kt /workspace/conf/user.keytab ailab 在本地环境 不需要调用的逻辑 il y a 2 ans
configs 261bc5b980 add idctest.init il y a 2 ans
constants 3caa8bfda2 增加调度中状态 il y a 2 ans
dag 38bd314365 新增dag文件 il y a 2 ans
data bcd6785215 中间结果另存 il y a 2 ans
docker 9ee0f52a71 update dockerfile il y a 2 ans
utils 1ad7206b6c 1. 完成基础work,job的构建 il y a 2 ans
.gitignore b6a68d2490 init il y a 2 ans
Dockerfile ea671eb79f 增加worker il y a 2 ans
Makefile b5f6741894 update idc il y a 2 ans
README.md 049a1dff52 update deploy il y a 2 ans
debug.ipynb 7e0960f0a3 1. 更新了数据转存任务 il y a 2 ans
development.ini 2d62ad53ff 1. 更新日志方式查询方式 il y a 2 ans
docker-compose.yml 41755c8067 update il y a 2 ans
environment.yml 72ae981493 add mysql-connector-python==8.0.29 il y a 2 ans
idctest.ini a6c4ccb7e9 update idc il y a 2 ans
production.ini f2fe385fb0 update hive server connection il y a 2 ans
rdbms-example.json 6f0793d275 datax json mysql il y a 2 ans
rdbms-template.json 6f0793d275 datax json mysql il y a 2 ans
render_script_to_dag_manual.ipynb 3bb8fa5643 1. 添加了任务触发函数接口 il y a 2 ans
requirements.txt 2694cd54a3 1. 完成基础run的构建 il y a 2 ans
run.py d12923e2bf 1. 完成日志的格式化输出 il y a 2 ans
server.py ea671eb79f 增加worker il y a 2 ans

README.md

Datax Admin

用于 dag 平台:

  • 数据源管理
  • 任务管理
  • 用户管理
  • 权限管理

启动

conda env create environment.yml
conda activate py38
python run.py

部署

在 k8s 生产环境设置 pod 的环境变量 APP_ENV=production

# 打包镜像
make image

# 打包镜像 + 用docker-compose启动容器
make deploy

# 在远程服务器的 REMOTE_WORKSPACE 下部署
make remote