问答 2024-01-15 来自:开发者社区

dataworks有没有python读取oss文件的实践?

dataworks有没有python读取oss文件的实践?

问答 2024-01-15 来自:开发者社区

dataworks这个接口,需要一个文件版本,这个版本又怎么知道呢?

dataworks这个接口,需要一个文件版本,这个版本又怎么知道呢?

问答 2024-01-14 来自:开发者社区

Dataworks 的文件提交OpenAPI有没有批量提交,SubmitFile一个个提交太慢了?

Dataworks 的文件提交OpenAPI有没有批量提交,SubmitFile一个个提交太慢了?比如这样一个流程(实际场景比这个复杂得多)

问答 2024-01-08 来自:开发者社区

DataWorks中使用oss读取csv文件至odps 报错 ?

从日志上看确认不是网络问题,和oss是通的 。但是这个报错日志看不出是啥问题?

问答 2024-01-07 来自:开发者社区

本地的CSV文件 怎么上传到dataworks的表中 ?

本地的CSV文件 怎么上传到dataworks的表中 ?

问答 2024-01-07 来自:开发者社区

dataworks从创建文件-提交发布-部署后,怎么样的流程才能做到以上的数据返回呢?

dataworks从创建文件-提交发布-部署后,怎么样的流程才能做到以上的数据返回呢?

问答 2024-01-07 来自:开发者社区

dataworks如果使用了openapi调用了创建文件CreateFile和发布文件后,是否成功?

dataworks如果使用了openapi 调用了创建文件CreateFile和发布文件后,定义的每天凌晨调度跑数据,那怎么查询该文件在调度时间是否是运行状态的或者成功呢?

问答 2024-01-07 来自:开发者社区

dataworks怎么删除或者更新发布部署后文件的实例?

dataworks怎么删除或者更新发布部署后文件的实例?

问答 2024-01-07 来自:开发者社区

dataworks用不同一个账号,多人开发怎么处理的,文件老是提示被锁?

dataworks中如何处理不同账号的多人开发问题?文件老是提示被锁

文章 2024-01-05 来自:开发者社区

DataWorks小文件产生的原因

DataWorks小文件产生的原因主要有以下几种: 数据量过大:当需要处理的数据量过大时,可能会生成大量的小文件。例如,在大数据计算过程中,如果数据被分发到多个任务或多个节点上处理,每个任务或节点可能会生成自己的小文件。 数据源不稳定:如果数据源不稳定,或者数据源的变化频率过高,那么每次数据变化都可能会导致生成新的文件,从而产生大量的小文件。 数据处理逻辑复杂:如果数据处理逻辑过于复杂...

DataWorks小文件产生的原因

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

大数据开发治理平台 DataWorks更多文件相关

产品推荐

大数据开发治理DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

+关注