阿里云文档 2025-04-08

基于ACK多机分布式部署DeepSeek满血版推理部署实战

本文深入解析基于阿里云容器服务ACK的DeepSeek-R1-671B大模型分布式推理实战方案。针对该千亿参数模型(671B)单卡显存不足的挑战,提出混合并行策略(Pipeline Parallelism=2 + Tensor Parallelism=8),结合阿里云Arena工具,实现在2台ecs.ebmgn8v.48xlarge(8*96GB)节点上的高效分布式部署。进一步演示如何将部署于AC...

文章 2023-10-12 来自:开发者社区

黑马程序员-大数据入门到实战-分布式SQL计算 Hive 语法与概念

1. 数据库操作创建数据库create database if not exists myhive;查看数据库详细信息desc database myhive;数据库本质上就是在HDFS之上的文件夹默认数据库的存放路径是HDFS的:/user/hive/warehouse内创建数据库并指定hdfs存储位置create database myhive2 location '/myhive2';删除....

黑马程序员-大数据入门到实战-分布式SQL计算 Hive 语法与概念
文章 2023-10-12 来自:开发者社区

黑马程序员-大数据入门到实战-分布式SQL计算 Hive 入门

1. Apache Hive 概述分布式SQL计算定义以分布式的形式,执行SQL语句,进行数据统计分析Apache Hive功能将SQL语句翻译成MapReduce程序,提供用户分布式SQL计算能力2. 模拟实现Hive功能元数据管理SQL解析器3. Hive基础架构元数据管理SQL解析器:完成SQL解析、执行优化、代码提交等功能用户接口:提供用户和Hive交互的功能4. Hive部署4.1 规....

黑马程序员-大数据入门到实战-分布式SQL计算 Hive 入门
文章 2023-10-12 来自:开发者社区

黑马程序员-大数据入门到实战-HDFS分布式存储

1. 为什么需要分布式存储① 数据量太大,单机存储能力有上限,需要靠数量来解决问题② 数量的提升带来的是网络传输,磁盘读写、CPU、内存等各方面的综合提升,分布式组合在一起可以达到1+1>2的效果2. 分布式的基础架构分析① 去中心化模式:没有明确中心,大家协调工作② 中心化模式:有明确的中心,基于中心节点分配工作(Hadoop)3. HDFS的基础架构NameNode:主角色,管理HDF....

黑马程序员-大数据入门到实战-HDFS分布式存储
文章 2018-06-26 来自:开发者社区

史上最快! 10小时大数据入门实战(七)- Hadoop 分布式环境搭建

1 环境介绍

文章 2018-06-24 来自:开发者社区

史上最快! 10小时大数据入门实战(五)-分布式计算框架MapReduce

目录 1 MapReduce概述 2 MapReduce编程模型之通过wordcount词频统计分析案例入门 MapReduce执行流程 InputFormat OutputFormat OutputFormt接口决定了在哪里以及怎样持久化作业结果。Hadoop为...

文章 2018-06-23 来自:开发者社区

史上最快! 10小时大数据入门实战(四)-分布式资源调度YARN

1 YARN 产生背景 2 YARN 架构 3 YARN 执行流程 1.client向yarn提交job,首先找ResourceManager分配资源, 2.ResourceManager开启一个Container,在Container中运行...

文章 2018-06-15 来自:开发者社区

史上最快! 10小时大数据入门实战(三)-分布式文件系统HDFS

HDFS 环境搭建 HDFS 伪分布式环境搭建 CentOS 环境安装步骤 MacOS安装环境 安装jdk jdk安装路径 /usr/libexec/java_home -V:列出所有版本的JAVA_HOME 设置 JAVA_HOME 添加java_home到.bash_profile文件中 export JAVA_HOME=$...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云分布式应用服务

企业级分布式应用服务 EDAS(Enterprise Distributed Application Service)是应用全生命周期管理和监控的一站式PaaS平台,支持部署于 Kubernetes/ECS,无侵入支持Java/Go/Python/PHP/.NetCore 等多语言应用的发布运行和服务治理 ,Java支持Spring Cloud、Apache Dubbo近五年所有版本,多语言应用一键开启Service Mesh。

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等

登录插画

登录以查看您的控制台资源

管理云资源
状态一览
快捷访问