问答 2023-07-16 来自:开发者社区

机器学习PAI easyrec模型训练组件demo中,还是继续训练完所有的epochs?

机器学习PAI easyrec模型训练组件demo中,num_steps=2500,num_epochs=10000。60万数量,batch_size=4096,num_works=6,那模型训练2500steps结束,还是继续训练完所有的epochs?

问答 2023-07-16 来自:开发者社区

机器学习PAI使用pai easyrec中组建去训练和评估模型,评估使用的是easyrec模型预测?

机器学习PAI使用pai easyrec中组建去训练和评估模型,评估使用的是easyrec模型预测组件,在这里报错,log是https://logview.aliyun.com/logview/?h=http://service.cn.maxcompute.aliyun-inc.com/api&p=DB_Warehouse_dev&i=20230714020929388gvi5jm...

问答 2023-07-16 来自:开发者社区

想问下机器学习PAI EasyRec 目前是否支持直接在训练的时候进行负采样吗?

想问下机器学习PAI EasyRec 目前是否支持直接在训练的时候进行负采样吗?

问答 2023-07-16 来自:开发者社区

麻烦问下机器学习PAI,本地单机训练没问题,配了tf_config开启训练报这个错大概是啥问题?

tensorflow.python.framework.errors_impl.OperatorNotAllowedInGraphError: using a tf.Tensor as a Python bool is not allowed in Graph execution. Use Eager execution or decorate this function with @tf.fu....

问答 2023-07-05 来自:开发者社区

请问机器学习PAI是什么原因会导致这种情况呢?(训练跟预测的时候参数顺序一致)

您好,打扰一下,我昨天调用transform方法进行预测之后进行打印,发现某些参与预测的字段在预测前跟预测后不一样,请问机器学习PAI是什么原因会导致这种情况呢?(训练跟预测的时候参数顺序一致)

问答 2023-07-04 来自:开发者社区

我想请问一下机器学习PAI,我现在有一个已经训练好的模型文件,请问如何导入呢?

我想请问一下机器学习PAI,岭回归流式预测组件LinearRegPredictStreamOp的构造函数需要一个model参数,我现在有一个已经训练好的模型文件,请问如何导入呢?用PipelineModel导入的模型不能用在这构造函数里

文章 2023-07-02 来自:开发者社区

类GPT模型训练提速26.5%,清华朱军等人用INT4算法加速神经网络训练

我们知道,将激活、权重和梯度量化为 4-bit 对于加速神经网络训练非常有价值。但现有的 4-bit 训练方法需要自定义数字格式,而当代硬件不支持这些格式。在本文中,清华朱军等人提出了一种使用 INT4 算法实现所有矩阵乘法的 Transformer 训练方法。模型训练得快不快,这与激活值、权重、梯度等因素的要求紧密相关。神经网络训练需要一定计算量,使用低精度算法(全量化训练或 FQT 训练)有....

类GPT模型训练提速26.5%,清华朱军等人用INT4算法加速神经网络训练
文章 2023-06-20 来自:开发者社区

吴恩达《机器学习训练秘籍》-误差分析

1.快速构建并迭代第一个系统当你想要构建一个新的垃圾邮件过滤系统时,团队可能会有各式各样不同的想法:收集海量的垃圾邮件作为训练集。例如,设置一个 “蜜罐(honeypot,计算机安全领域又称为诱饵)”,故意地向垃圾邮件系统发送一些虚假邮件地址,以便于能够自动收集到垃圾 邮件系统发送到这些地址的垃圾邮件内容。开发用于理解邮件文本内容的功能。开发用于理解邮件信封或邮件头部特征的功能,据此了解邮件经由....

吴恩达《机器学习训练秘籍》-误差分析
问答 2023-06-20 来自:开发者社区

在机器学习PAI用easy_rec训练了一个Esmm,自己手写了一个,RT吞吐为什么差这么多?

在机器学习PAI用easy_rec训练了一个Esmm,RT 99线是15ms;我们自己手写了个Esmm,RT 99线是4ms;效果差不多,RT吞吐为什么差这么多。模型是有什么优化开关吗?easy_rec 训练的esmm 用gpu RT居然是cpu的10倍,转为onnx也比裸模型RT高,是我们有什么地方用的姿势不对吗。特征数不到90,样本大概5000w条。

问答 2023-06-20 来自:开发者社区

在机器学习PAI为什么0.6.3没有打印训练日志?

在机器学习PAI为什么0.6.3没有打印训练日志?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

人工智能平台PAI

人工智能平台 PAI(Platform for AI,原机器学习平台PAI)是面向开发者和企业的机器学习/深度学习工程平台,提供包含数据标注、模型构建、模型训练、模型部署、推理优化在内的AI开发全链路服务,内置140+种优化算法,具备丰富的行业场景插件,为用户提供低门槛、高性能的云原生AI工程化能力。

+关注