阿里云文档 2025-03-10

基于异构机密计算实例构建安全大语言模型推理环境

随着大语言模型技术的普及,越来越多的企业开始尝试利用该技术来提升业务能力。因此,如何构建安全的大模型推理服务,确保推理过程中的数据安全,已成为企业关注的热点话题。本文将介绍如何基于阿里云异构机密计算实例及Confidential AI方案(以下简称CAI),快速构建安全的大语言模型推理环境。

阿里云文档 2025-02-26

在GPU实例(8代)上构建DeepSeek-V3/R1的推理服务

DeepSeek-V3/R1是拥有600B以上参数量的专家混合(MoE)模型,并已经开源了模型权重。在ebmgn8v实例上快速方便地构建DeepSeek-V3/R1的推理服务,您无需深入了解底层硬件,也无需额外配置即可开箱即用。本文为您介绍如何在ebmgn8v实例上构建DeepSeek-V3/R1的推理服务。

阿里云文档 2024-09-18

在Linux系统GPU实例中使用PyTorch时,出现“undefined symbol: __nvJitLinkAddData_12_1, version libnvJitLink.so.12”报错

在Linux系统GPU实例中,可能会因为GPU实例所安装的CUDA版本与PyTorch版本不兼容,导致使用PyTorch时出现报错现象,本文介绍这种情况的解决方案。

阿里云文档 2024-08-23

更换GPU实例的操作系统时如何取消自动安装GPU(Tesla)驱动功能

创建GPU实例时,选择镜像后并同时选择了安装GPU驱动选项,则创建实例后会自动安装GPU(Tesla)驱动。如果因某种原因(例如当前使用的操作系统不能满足业务需求),您需要更换该GPU实例的操作系统,则同时也需要取消自动安装Tesla驱动功能,单独手动安装适配新操作系统的Tesla驱动,确保正常使用GPU实例的高性能特性。

阿里云文档 2024-08-22

重启GPU实例后导致Persistence Mode属性开启失效, 同时ECC状态或MIG功能设置也失败

在GPU计算型实例中安装高版本Tesla驱动(例如驱动版本为535或更高版本)后,通过nvidia-smi -pm 1命令方式开启Persistence Mode属性,可能会因为驱动版本过高,重启实例后导致该属性开启失效,同时ECC状态或MIG功能设置也失败,本文介绍这种情况的解决方案。

文章 2022-05-30 来自:开发者社区

阿里云GPU云服务器抢占式实例大幅度降低GPU云服务器实例成本

深度学习科学计算等应用场景首选GPU云服务器,但是GPU服务器硬件成本高,让很多开发者望而却步,云服务器吧建议大家可以选择阿里云GPU云服务器竞价型实例,现在竞价型实例已经改名为抢占式实例,阿里云推出竞价型GPU云服务器,极大程度的降低成本提高计算能力,使GPU成为强大的技术云助力产品:   阿里云GPU云服务器抢占式实例 科学计算、AI深度学习、视频渲染转码等应用场景适用GPU服务器再...

文章 2022-04-03 来自:开发者社区

阿里云GPU云服务器抢占式实例大幅度降低GPU云服务器实例成本

深度学习科学计算等应用场景首选GPU云服务器,但是GPU服务器硬件成本高,让很多开发者望而却步,云服务器吧建议大家可以选择阿里云GPU云服务器竞价型实例,现在竞价型实例已经改名为抢占式实例,阿里云推出竞价型GPU云服务器,极大程度的降低成本提高计算能力,使GPU成为强大的技术云助力产品:   阿里云GPU云服务器抢占式实例 科学计算、AI深度学习、视频渲染转码等应用场景适用GPU服务器再...

文章 2022-03-21 来自:开发者社区

阿里云GPU云服务器抢占式实例大幅度降低GPU云服务器实例成本

深度学习科学计算等应用场景首选GPU云服务器,但是GPU服务器硬件成本高,让很多开发者望而却步,云服务器吧建议大家可以选择阿里云GPU云服务器竞价型实例,现在竞价型实例已经改名为抢占式实例,阿里云推出竞价型GPU云服务器,极大程度的降低成本提高计算能力,使GPU成为强大的技术云助力产品:   阿里云GPU云服务器抢占式实例 科学计算、AI深度学习、视频渲染转码等应用场景适用GPU服务器再...

文章 2022-01-07 来自:开发者社区

阿里云GPU云服务器抢占式实例大幅度降低GPU云服务器实例成本

深度学习科学计算等应用场景首选GPU云服务器,但是GPU服务器硬件成本高,让很多开发者望而却步,云服务器吧建议大家可以选择阿里云GPU云服务器竞价型实例,现在竞价型实例已经改名为抢占式实例,阿里云推出竞价型GPU云服务器,极大程度的降低成本提高计算能力,使GPU成为强大的技术云助力产品:   阿里云GPU云服务器抢占式实例 科学计算、AI深度学习、视频渲染转码等应用场景适用GPU服务器再...

文章 2021-10-10 来自:开发者社区

阿里云GPU云服务器抢占式实例大幅度降低GPU云服务器实例成本

深度学习科学计算等应用场景首选GPU云服务器,但是GPU服务器硬件成本高,让很多开发者望而却步,云服务器吧建议大家可以选择阿里云GPU云服务器竞价型实例,现在竞价型实例已经改名为抢占式实例,阿里云推出竞价型GPU云服务器,极大程度的降低成本提高计算能力,使GPU成为强大的技术云助力产品:   阿里云GPU云服务器抢占式实例 科学计算、AI深度学习、视频渲染转码等应用场景适用GPU服务器再...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

云服务器ECS

云服务器ECS是一种安全可靠、弹性可伸缩的IaaS级云计算服务。在这里你可以获取最新的ECS产品资讯、最前沿的技术交流以及优惠活动等信息,加速自己的技术成长。

+关注