Nav apraksta

Zhang Li c05cd85f8a update idcprod 1 gadu atpakaļ
app 3fcc21aef2 数据湖表结构查询修改 1 gadu atpakaļ
assets 55358fcb3c add txprod 2 gadi atpakaļ
auo_tests 837f73d2d9 1. 修改了超时和超时传参bug 1 gadu atpakaļ
configs 55358fcb3c add txprod 2 gadi atpakaļ
constants 1bcc48eb90 状态增加 1 gadu atpakaļ
dag 38bd314365 新增dag文件 2 gadi atpakaļ
data 7936c7b966 增加镜像类型,增加ai一期接口配置 1 gadu atpakaļ
docker 55358fcb3c add txprod 2 gadi atpakaļ
utils 25d8058a67 mysql获取表数据时,表头获取方法修改 2 gadi atpakaļ
.gitignore a259d54b24 fix: bug principal 2 gadi atpakaļ
Dockerfile 5543874fd5 update idcprod 1 gadu atpakaļ
Makefile c05cd85f8a update idcprod 1 gadu atpakaļ
README.md 049a1dff52 update deploy 2 gadi atpakaļ
debug.ipynb 7da7f95ada 1. 设置python 作业 默认执行脚本为main.py 2 gadi atpakaļ
delete.py cd02cc7b6f 定时删除日志 2 gadi atpakaļ
development.ini 7936c7b966 增加镜像类型,增加ai一期接口配置 1 gadu atpakaļ
docker-compose.yml 56d68ae0af 合并分支 2 gadi atpakaļ
environment.yml 3d34c0ae45 增加kazoo依赖 1 gadu atpakaļ
idcprod.ini 5543874fd5 update idcprod 1 gadu atpakaļ
idctest.ini fa79bd9d75 Merge branch 'master' of http://gogsb.soaringnova.com/sxwl_DL/datax-admin 1 gadu atpakaļ
production.ini 7936c7b966 增加镜像类型,增加ai一期接口配置 1 gadu atpakaļ
rdbms-example.json 6f0793d275 datax json mysql 2 gadi atpakaļ
rdbms-template.json 6f0793d275 datax json mysql 2 gadi atpakaļ
render_script_to_dag_manual.ipynb 3bb8fa5643 1. 添加了任务触发函数接口 2 gadi atpakaļ
requirements.txt 95ce07b83b 1. 修改了超时和超时传参 1 gadu atpakaļ
run.py d12923e2bf 1. 完成日志的格式化输出 2 gadi atpakaļ
run_delete.py cd02cc7b6f 定时删除日志 2 gadi atpakaļ
server.py e45987d41a merge ind 2 gadi atpakaļ
sxkj.ini 7936c7b966 增加镜像类型,增加ai一期接口配置 1 gadu atpakaļ
txprod.ini 7936c7b966 增加镜像类型,增加ai一期接口配置 1 gadu atpakaļ
txtest.ini 646eea081c jupyter镜像区分算法组与普通项目 1 gadu atpakaļ

README.md

Datax Admin

用于 dag 平台:

  • 数据源管理
  • 任务管理
  • 用户管理
  • 权限管理

启动

conda env create environment.yml
conda activate py38
python run.py

部署

在 k8s 生产环境设置 pod 的环境变量 APP_ENV=production

# 打包镜像
make image

# 打包镜像 + 用docker-compose启动容器
make deploy

# 在远程服务器的 REMOTE_WORKSPACE 下部署
make remote