Нема описа

Zhang Li 423b1d2778 add sxkj пре 2 година
app e1fe2c15a6 hive 查表增加`符号,避免纯数字表名 пре 2 година
assets 91c31d6b1f test new kebtab пре 2 година
auo_tests 1a8e802786 add hostalias пре 2 година
configs 261bc5b980 add idctest.init пре 2 година
constants 65d5038752 同步配置日志获取、数据源添加增加报错信息 пре 2 година
dag 38bd314365 新增dag文件 пре 2 година
data bcd6785215 中间结果另存 пре 2 година
docker 9ee0f52a71 update dockerfile пре 2 година
utils 1ad7206b6c 1. 完成基础work,job的构建 пре 2 година
.gitignore b6a68d2490 init пре 2 година
Dockerfile 423b1d2778 add sxkj пре 2 година
Makefile 423b1d2778 add sxkj пре 2 година
README.md 049a1dff52 update deploy пре 2 година
debug.ipynb 7da7f95ada 1. 设置python 作业 默认执行脚本为main.py пре 2 година
delete.py cd02cc7b6f 定时删除日志 пре 2 година
development.ini 2d62ad53ff 1. 更新日志方式查询方式 пре 2 година
docker-compose.yml cd02cc7b6f 定时删除日志 пре 2 година
environment.yml cd02cc7b6f 定时删除日志 пре 2 година
idctest.ini 1a8e802786 add hostalias пре 2 година
production.ini 1a8e802786 add hostalias пре 2 година
rdbms-example.json 6f0793d275 datax json mysql пре 2 година
rdbms-template.json 6f0793d275 datax json mysql пре 2 година
render_script_to_dag_manual.ipynb 3bb8fa5643 1. 添加了任务触发函数接口 пре 2 година
requirements.txt 2694cd54a3 1. 完成基础run的构建 пре 2 година
run.py d12923e2bf 1. 完成日志的格式化输出 пре 2 година
run_delete.py cd02cc7b6f 定时删除日志 пре 2 година
server.py 04419f3a23 update dag0 пре 2 година
sxkj.ini 423b1d2778 add sxkj пре 2 година

README.md

Datax Admin

用于 dag 平台:

  • 数据源管理
  • 任务管理
  • 用户管理
  • 权限管理

启动

conda env create environment.yml
conda activate py38
python run.py

部署

在 k8s 生产环境设置 pod 的环境变量 APP_ENV=production

# 打包镜像
make image

# 打包镜像 + 用docker-compose启动容器
make deploy

# 在远程服务器的 REMOTE_WORKSPACE 下部署
make remote