开源版本对接第四范式Aios大数据&机器学习DAG任务。
apiVersion: v1
kind: Namespace
metadata:
annotations:
fl-managed-ns-config: '{"onAios":true,"name":"fl-test","aiosWorkspaceId":"","aiosAccessKey":""}'
labels:
fl-managed-ns: "true"
name: fl-test
其中:
也可以直接在aios对应的工作区上,添加flowengine管理的注解,将该工作区纳入flowengine管理。
绑定完成后,可以通过aios进行数据导入,并利用建模ide进行建模,调试开发完成后,可以到处为dag文件。
在flowengine hub中创建dag job,将dag文件导入,编排进pipeline中即可。