问答 2024-08-14 来自:开发者社区

机器学习PAI用PS-Worker模式进行分布式训练?

机器学习PAI用PS-Worker模式进行分布式训练,并且data_config设置shuffle: false,如果训练集按某字段进行了排序,顺序相邻的样本会大概率在同一worker的同一个batch里吗?

问答 2024-07-10 来自:开发者社区

机器学习PAI现在有没有支持分布式eval的 gauc?

机器学习PAI现在有没有支持分布式eval的 gauc?单worker实在跑不动了。

问答 2024-03-26 来自:开发者社区

机器学习PAI有没有配置cluster 系统自动生成分布式参数 的文档?

机器学习PAI有没有配置cluster 系统自动生成分布式参数 的文档?

文章 2024-02-25 来自:开发者社区

机器学习PAI报错问题之跑collective gpu分布式报错如何解决

问题一:这边报错是Java类找不到,这种机器学习PAI问题该怎么解决呢? 我们在python通过S3HadoopFileSystem连接S3的时候报错,我这边是已经下载了s3-hadoop的plugin,版本号是'1.11.788' ...

机器学习PAI报错问题之跑collective gpu分布式报错如何解决
问答 2024-02-06 来自:开发者社区

机器学习PAI在分布式评估的时候,遇到了这个错误这是不是要改一下?

机器学习PAI在分布式评估的时候,遇到了这个错误这是不是要改一下?

问答 2024-01-04 来自:开发者社区

机器学习PAI的EasyRec在使用DLC做分布式训练时得到如下错误怎么解决?

机器学习PAI的EasyRec在使用DLC做分布式训练时得到如下错误怎么解决?

问答 2023-12-19 来自:开发者社区

想问下机器学习PAI,分布式训练时一定要设置num_steps,这一条现在还是这样吗?

想问下机器学习PAI,分布式训练时一定要设置num_steps,否则评估任务会结束不了这一条现在还是这样吗?我刚才没设置num_steps,也评估完了

问答 2023-11-12 来自:开发者社区

机器学习PAI分布式训练有最佳实践吗,如同步/异步模式,optimizer怎么选择等 ?

机器学习PAI分布式训练有最佳实践吗,如同步/异步模式,optimizer怎么选择等 ?

问答 2023-11-12 来自:开发者社区

机器学习PAI分布式训练同步模式时num_steps的设置方法?

机器学习PAI分布式训练同步模式时num_steps的设置方法?

问答 2023-11-12 来自:开发者社区

机器学习PAI我们用了分布式训练(4个Worker),比单机(1个Worker),麻烦帮忙看下?

机器学习PAI我们用了分布式训练(4个Worker),比单机(1个Worker),用PAI-TF进行训练,时间上看分布式训练和单机训练是一样的(甚至还慢一些)。麻烦帮忙看下?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云分布式应用服务

企业级分布式应用服务 EDAS(Enterprise Distributed Application Service)是应用全生命周期管理和监控的一站式PaaS平台,支持部署于 Kubernetes/ECS,无侵入支持Java/Go/Python/PHP/.NetCore 等多语言应用的发布运行和服务治理 ,Java支持Spring Cloud、Apache Dubbo近五年所有版本,多语言应用一键开启Service Mesh。

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等