文章 2024-10-16 来自:开发者社区

大数据平台的毕业设计01:Hadoop与离线分析

前言 最近有很多人问我,大数据专业有什么好的毕设项目,我就简单的回复了一下。也有直接问我要源码的.... 所以就抽空写一写自己毕业设计的一个思路,大数据是我实习自学的,这个思路是我当初自己想的,就当做一份参考吧。 在我毕业那年,同学们毕业设计大多都是以Java语言开发的各种管理...

大数据平台的毕业设计01:Hadoop与离线分析
问答 2024-08-26 来自:开发者社区

在大数据计算MaxCompute中,请问离线抽取任务怎么修改为手动任务哈?

在大数据计算MaxCompute中,请问离线抽取任务怎么修改为手动任务哈?

问答 2024-07-29 来自:开发者社区

调整Spark读取ODPS离线表分区大小的方法是什么?

调整Spark读取ODPS离线表分区大小的方法是什么?

问答 2024-07-24 来自:开发者社区

在大数据计算MaxCompute为什么离线同步任务一直在wait?

在大数据计算MaxCompute为什么离线同步任务一直在wait?调度资源是有的

问答 2024-07-23 来自:开发者社区

Dataworks 离线数据同步,从 odps 同步到 sls,是否支持sls的日志时间配置设置?

Dataworks 离线数据同步,从 odps 同步到 sls,是否支持sls的日志时间配置设置?

问答 2024-07-23 来自:开发者社区

在dataworks上配置了离线同步任务: 从maxcompute同步到 holo 的任务怎么办?

在dataworks上配置了离线同步任务: 从maxcompute同步到 holo 的任务,任务运行一直卡着不动了。 ( 前面运行都很正常,今天下午就不行了,正常3分钟就同步完了) 区域是:华北2(北京) ?

问答 2024-07-23 来自:开发者社区

DataWorks整库离线同步mysql->maxCompute,54张表,这个资源组能支撑的住吗?

DataWorks整库离线同步mysql->maxCompute,54张表,拆分成了两个同步任务,现在增量同步,周期5分钟一次,任务一是平均1-2分钟,任务二是平均2-3分钟。资源组是2个CU,如果我再加一个差不多库同步,这个资源组能支撑的住吗?这是我现在的资源组使用率

文章 2024-07-19 来自:开发者社区

MaxCompute产品使用合集之如何在DataWorks中实现离线同步多个分表到MC的多级分区表

问题一:dataworks其他数据库同步至maxcompute时备库有限? dataworks其他数据库同步至maxcompute时备库有限? 参考回答: DataWorks的数据集成功能支持将其他数据源,例如RDS等数据库的数据同步至MaxCompute。在同步过程中,先进行全量数据迁移,然后再实时同步增量数据至目标端。同时,对于不同类型的数据库,如MySQL...

文章 2024-07-18 来自:开发者社区

MaxCompute产品使用合集之整库离线同步至MC的配置中,是否可以清除原表所有分区数据的功能

问题一:现在所有的 Maxcompute 和 dataworks 都在杭州区域,有快捷的方式吗? 现在所有的 Maxcompute 和 dataworks 都在杭州区域,有快捷的方式吗? 参考回答: 元数据 数据源 任务等建议使用迁移助手 ;表数据同步的话 是使用同步任务进行跨工作空间同步 您也可以问一下mc同学看下有没有更便捷的方式同步表数据 , ...

MaxCompute产品使用合集之整库离线同步至MC的配置中,是否可以清除原表所有分区数据的功能
问答 2024-07-17 来自:开发者社区

大数据计算MaxCompute的dataX离线同步,针对业务表太大的情况,内部会分页循环嘛?

大数据计算MaxCompute的dataX离线同步,针对业务表太大的情况,内部会分页循环嘛,内部有优化机制嘛?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

云原生大数据计算服务 MaxCompute离线相关内容

云原生大数据计算服务 MaxCompute您可能感兴趣

产品推荐

阿里巴巴大数据计算

阿里大数据官方技术圈

+关注