阿里云文档 2023-11-21

如何配置逻辑表和事实逻辑表的调度依赖配置_智能数据建设与治理 Dataphin(Dataphin)

调度依赖用于配置逻辑表和事实逻辑表任务节点,Dataphin通过各个节点的调度依赖的配置结果,有序的运行业务流程中各个节点,保障业务数据有效、适时地产出。本文为您介绍如何配置逻辑表和事实逻辑表的调度依赖配置。

阿里云文档 2023-06-09

问题描述Dataphin使用OpenAPI提交任务提示该任务的上游节点不存在,但是产品界面自动解析可以解析出来。问题原因当使用ParseDependency接口解析获取上游节点时,仅可获取到依赖的任务,但是无法获取到未解析到上游的表或字段的信息。但是在产品界面中,可以获取到缺失上游的来源表或者字段的...

问答 2023-04-11 来自:开发者社区

老师,客户有两个问题,麻烦帮忙确认下:1. 客户dataphin的任务上游是dataworks调度的

老师,客户有两个问题,麻烦帮忙确认下:1. 客户dataphin的任务上游是dataworks调度的,dataphin的job没有等到上游的新的partition,会占用内存cpu吗? 2. dataphin 中fail的 task,需要算费用吗?

问答 2023-04-04 来自:开发者社区

dataphin任务上游依赖dataworks中的任务节点,这个可以吗?

dataphin任务上游依赖dataworks中的任务节点,这个可以吗?

问答 2023-04-04 来自:开发者社区

Dataphin离线管道如果上游数据库字段名带括号或空格这样的怎么特殊处理?

Dataphin离线管道如果上游数据库字段名带括号或空格这样的怎么特殊处理?不处理的话就报错了,比如括号被误当成了函数

阿里云文档 2023-01-22

同步报错解密数据异常,请检查配置java.lang.ExceptionAESdecrypterror

问题描述Dataphin输入组件中来源表的数据在上游通过UDF函数进行了加密,管道任务通过解密组件对数据进行解密之后再同步到目标表。管道任务运行报错“解密数据异常, 请检查配置!java.lang.Exception: AES decrypt error”。完整的异常如下:2023-01-12 07...

阿里云文档 2023-01-06

Dataphin为什么上游依赖节点任务没有执行,下游节点任务就执行了

问题描述Dataphin周期任务上游依赖节点任务没有执行,为什么下游节点任务就执行了。问题原因上游节点任务被用户手动置成功后,所以下游任务调起运行,然后用户在下游任务运行成功后,再次手动重跑了这个上游节点任务导致的。解决方案上游节点任务手动置成功后,无需再次重跑任务,或者按照任务正常调度时间执行即可...

问答 2022-12-20 来自:开发者社区

Dataphin中这图里的上游依赖是什么东西,在哪里可以管理它吗?

Dataphin中这图里的上游依赖是什么东西,在哪里可以管理它吗?

问答 2022-11-23 来自:开发者社区

Dataphin 提供了实例运行诊断的能力,从上游依赖、定时时间、限流规则、调度资源及实例执行 5

Dataphin 提供了实例运行诊断的能力,从上游依赖、定时时间、限流规则、调度资源及实例执行 5 个阶段分析,实例运行过程中可能产生的异常有什么?

阿里云文档 2022-09-27

问题描述Dataphin中SQL计算任务自动解析上游依赖失败,报错“xxx[Read time out]xxx”。问题原因解析上游依赖时出现该问题的原因一般为用户SQL代码过长,导致解析时间过长而超时。解决方案建议把代码拆分为多个部分,创建多个不同的计算任务,这样可读性也会好一些。适用于Dataph...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。