Zhang Li
b97ccb6595
fix: add txprodbd
|
před 1 rokem | |
|---|---|---|
| .. | ||
| README.md | před 1 rokem | |
| core-site.xml | před 1 rokem | |
| hdfs-site.xml | před 1 rokem | |
| hive-site.xml | před 1 rokem | |
| krb5.conf | před 1 rokem | |
| livy-client.conf | před 1 rokem | |
| livy.conf | před 1 rokem | |
| log4j.properties | před 1 rokem | |
| mapred-site.xml | před 1 rokem | |
| spark-defaults.conf | před 1 rokem | |
| user.keytab | před 1 rokem | |
| yarn-site.xml | před 1 rokem | |
| 信息.txt | před 1 rokem | |
| 平台登录地址.txt | před 1 rokem | |
| 第三方服务.txt | před 1 rokem | |
README.md
测试 livy
code
curl --request POST \
--url http://172.23.7.140:30998/sessions \
--header 'content-type: application/json' \
--data '{
"kind": "spark"
}' | jq
curl --request GET \
--url http://172.23.7.140:30998/sessions/0 \
--header 'content-type: application/json' \
--data '{
"kind": "spark"
}' | jq
curl -XPOST 'http://172.23.7.140:30998/sessions/0/statements' \
-H 'Content-Type: application/json' \
-d '{"code": "spark.range(1000 * 1000 * 1000).count()"}' | jq
curl --request GET \
--url http://172.23.7.140:30998/sessions/0/statements/0 | jq
## pyspark
curl --request POST \
--url http://10.138.143.16:8998/sessions \
--header 'content-type: application/json' \
--data '{
"kind": "pyspark"
}' | jq
# 查看session
curl --request GET \
--url http://10.138.143.16:8998/sessions/0 \
--header 'content-type: application/json' \
--data '{
"kind": "pyspark"
}' | jq
# 提交任务
curl -XPOST 'http://10.138.143.16:8998/sessions/0/statements' \
-H 'Content-Type: application/json' \
-d '{"code": "sc.range(5).collect()"}'
# 查看结果
curl --request GET \
--url http://10.138.143.16:8998/sessions/0/statements/0 | jq
curl -X DELETE \
--url http://10.138.143.16:8998/sessions/0 | jq