程序员云原生大数据计算服务 MaxCompute 的相关内容

文章 2024-10-16 来自：开发者社区

我的程序员之路03：我和大数据

前言又是一年乍暖还寒，春天的风迎面而来，凉意中夹杂着些许温暖。哦，你知道，是春天来了。就像那年的实习期，在挥手告别的毕业季，定格在了那年的七月。人会怀念，怀念青涩时期的自己，懵懵懂懂却又充满着努力。人会想念，想念每天朝夕相处的人，有一天会在转角挥手告别。人会改变，改变了不善言辞的自己，终游荡于人情世故之中。毕业近三年，从业大数据已近四年，顺着大数据的浪潮，在一个不大...

文章 2024-10-16 来自：开发者社区

我的程序员之路02：大数据实习篇

实习一年，我从Java入门者成为了一名大数据开发。第一份实习offer 专升本的第一学年末，凭借着自学Java拿到了人生的第一份Java开发的实习offer。我深知那时候我的Java水平有限，也深知能拿到offer并不是因为我多优秀，而是公司一批招了20多个人。 17年7月，收拾好行李，和舍友体验了一天的找房、打扫、入住流程之后，于第二天的早晨第一次踏入了公司，开发岗的...

问答 2024-05-13 来自：开发者社区

程序员小sister的烦恼_快速上手大数据ETL神器Kettle(xls导入mysql)

引言大家好,我是ChinaManor,直译过来就是中国码农的意思,我希望自己能成为国家复兴道路的铺路人,大数据领域的耕耘者,平凡但不甘于平庸的人。一文快速搞懂系列讲究快速入门掌握一个新的大数据组件,帮助新手了解大数据技术,以下是系列文章:文章传送门:一文快速搞懂Kudu到底是什么一文快速了解Elastic Search 开源搜索引擎（技术选型+启动命令）一文快速了解ClickHouse 战斗民族....

文章 2023-10-12 来自：开发者社区

黑马程序员-大数据入门到实战-分布式SQL计算 Hive 语法与概念

1. 数据库操作创建数据库create database if not exists myhive;查看数据库详细信息desc database myhive;数据库本质上就是在HDFS之上的文件夹默认数据库的存放路径是HDFS的：/user/hive/warehouse内创建数据库并指定hdfs存储位置create database myhive2 location '/myhive2';删除....

文章 2023-10-12 来自：开发者社区

黑马程序员-大数据入门到实战-分布式SQL计算 Hive 入门

1. Apache Hive 概述分布式SQL计算定义以分布式的形式，执行SQL语句，进行数据统计分析Apache Hive功能将SQL语句翻译成MapReduce程序，提供用户分布式SQL计算能力2. 模拟实现Hive功能元数据管理SQL解析器3. Hive基础架构元数据管理SQL解析器：完成SQL解析、执行优化、代码提交等功能用户接口：提供用户和Hive交互的功能4. Hive部署4.1 规....

文章 2023-10-12 来自：开发者社区

黑马程序员-大数据入门到实战-HDFS分布式存储

1. 为什么需要分布式存储① 数据量太大，单机存储能力有上限，需要靠数量来解决问题② 数量的提升带来的是网络传输，磁盘读写、CPU、内存等各方面的综合提升，分布式组合在一起可以达到1+1>2的效果2. 分布式的基础架构分析① 去中心化模式：没有明确中心，大家协调工作② 中心化模式：有明确的中心，基于中心节点分配工作（Hadoop）3. HDFS的基础架构NameNode：主角色，管理HDF....

文章 2023-10-12 来自：开发者社区

黑马程序员-大数据入门到实战-MapReduce & YARN入门

1. 分布式计算概述计算与分布式计算计算：对数据进行处理，使用统计分析等手段得到需要的结果分布式计算：多台服务器协同工作，共同完成一个计算任务分布式计算的两种工作模式分散→汇总（MapReduce）中心调度→步骤执行（Spark、Flink）2. MapReduce概述MapReduceHadoop中分布式计算组件分散→汇总模式主要接口map接口：“分散”功能reduce接口：“汇总”功能运行机....

文章 2023-10-12 来自：开发者社区

黑马程序员-大数据入门到实战-前置章节

1. 环境介绍基于VMware构建Linux虚拟机① 是大数据从业者或IT从业者的必备技能之一② 是成本低廉的方案2. VMware准备虚拟机① 设置VMware网段② 下载Centos操作系统③ 在VMware中安装Centos操作系统④ 配置多台Linux虚拟机3. VMware虚拟机系统设置3.1 主机名、IP、SSH免密登录对三台虚拟机完成主机名、固定IP、SSH免密登录等系统设置3.1....

文章 2023-04-26 来自：开发者社区

java程序员的AI之路-大数据篇 hadoop安装

java程序员的AI之路-大数据篇hadoop安装最近AI（人工智能）是一大风口啊，乌镇互联网大会各个大佬们记们谈论点都是AI了，在这样的行情下，怎么能不沾一沾Ai的潮流，拥抱人工智能的热浪中去呢。好吧，那么问题来了，该从哪入手呢，感觉跟以前走的路完全不同啊，于是开始找各种方式来找学习ai的路线。嗯，首先是语言，貌似python是最适合搞ai的，虽然也学过一点，但貌似并不专业啊。我可是JAVA程....