Нема описа

张 巡 cc4cd266d8 zx пре 1 година
app 130632cdeb fix: remove archives пре 1 година
assets 90adab24da update dockerfile пре 1 година
auo_tests 1a8e802786 add hostalias пре 1 година
configs cd9f0d3970 add idcprod пре 1 година
constants dce3d479fc 超时时间传参判定修改 пре 1 година
dag 38bd314365 新增dag文件 пре 1 година
data 1845a48934 更新 data.sql пре 1 година
deploy cc4cd266d8 zx пре 1 година
docker 58342ff31a docker/txprod пре 1 година
utils 25d8058a67 mysql获取表数据时,表头获取方法修改 пре 1 година
.gitignore d93c092df7 fix: bug principal пре 1 година
Dockerfile 90adab24da update dockerfile пре 1 година
Makefile ed29915313 update idcprod пре 1 година
README.md 33b0aeaf36 update readme.md пре 1 година
condaenv.gakytdwy.requirements.txt cc4cd266d8 zx пре 1 година
debug.ipynb 7da7f95ada 1. 设置python 作业 默认执行脚本为main.py пре 1 година
delete.py cd02cc7b6f 定时删除日志 пре 1 година
development.ini 9b5e86ac5a 更新本地运行调试配置 пре 1 година
docker-compose.yml 56d68ae0af 合并分支 пре 1 година
environment.yml aee5194a2d 增加kazoo依赖 пре 1 година
idcprod.ini 728c5142ac feat: python hdfs idcprod пре 1 година
idctest.ini aa6c5c3c00 feat: python hdfs пре 1 година
production.ini 1881841e77 对接镜像资源 пре 1 година
rdbms-example.json 6f0793d275 datax json mysql пре 2 година
rdbms-template.json 6f0793d275 datax json mysql пре 2 година
render_script_to_dag_manual.ipynb 3bb8fa5643 1. 添加了任务触发函数接口 пре 1 година
requirements.txt 2694cd54a3 1. 完成基础run的构建 пре 1 година
run.py d12923e2bf 1. 完成日志的格式化输出 пре 2 година
run_delete.py cd02cc7b6f 定时删除日志 пре 1 година
server.py c8dc61e8d1 merge пре 1 година
sxkj.ini 3a94d7c563 预览数据进行模糊查询 пре 1 година
test_run.py 8b4c957718 获取表数据,所有数据转为字符串类型 пре 1 година
txprod.ini f9dc8599e7 jupyterLab增加资源配置 пре 1 година
txtest.ini f9dc8599e7 jupyterLab增加资源配置 пре 1 година

README.md

Datax Admin

用于 dag 平台:

  • 数据源管理
  • 任务管理
  • 用户管理
  • 权限管理

启动

conda env create environment.yml
conda activate py38
python run.py

部署

在 k8s 生产环境设置 pod 的环境变量 APP_ENV=production

# 打包镜像
make image

# 打包镜像 + 用docker-compose启动容器
make deploy

# 在远程服务器的 REMOTE_WORKSPACE 下部署
make remote