文章 2017-05-02 来自:开发者社区

《Hadoop海量数据处理:技术详解与项目实战(第2版)》一2.2 Hadoop架构

本节书摘来异步社区《Hadoop海量数据处理:技术详解与项目实战(第2版)》一书中的第2章,第2.2节,作者: 范东来 责编: 杨海玲,更多章节内容可以访问云栖社区“异步社区”公众号查看。 2.2 Hadoop架构 Hadoop主要由两部分构成:分布式文件系统HDFS和统一资源管理和调度系统YARN。正如前文所述,分布式文件系统主要是用于海量数据的存储,而YARN主要是管理集群的计算资源并根据计....

文章 2017-03-06 来自:开发者社区

技术与架构,解析如何将大数据最快落地到实践

免费开通大数据服务:https://www.aliyun.com/product/odps 直播回顾: https://yq.aliyun.com/webinar/history?spm=5176.8067841.wnold.1.rLvSkQ 3月9日14点,业内首个结合技术与应用的在线大数据技术峰会即将展开,届时6位阿里技术大咖与4位行业资深实践者将从技术与业务两个方面,与大家探讨大数...

技术与架构,解析如何将大数据最快落地到实践
文章 2017-03-03 来自:开发者社区

【14点正式开始】技术与架构,解析如何将大数据最快落地到实践

3月9日14点,业内首个结合技术与应用的在线大数据技术峰会即将展开,届时6位阿里技术大咖与4位行业资深实践者将从技术与业务两个方面,与大家探讨大数据如何最快落地到实践。较为有看点的是: 最深入的实践:本次在线峰会上,6个阿里规模的大数据实践将被深入分享,包括大数据平台的性能调优、流式增量计算、持续发布与演进、机器学习平台打造等。同时,在技术分享之外,你还可以与嘉宾进行问答互动,免费的学习机会...

文章 2017-03-03 来自:开发者社区

微博红包技术最佳实践:架构及运维

微博红包在春节也是一个比较热门的词汇,经常出现在各种事件流之中,但是微博红包面临的场景比较特殊,比如面临亿级用户的大规模场景,它背后的技术架构和技术结构是怎么样的呢?来自微博红包团队的技术负责人柯立志在云栖社区2017在线技术峰会红包技术分会现场分享了微博红包背后的技术实践。 视频回顾:点击进入 pdf下载:点击进入 红包业务场景 今年的场景新增了传送门和粉丝红包。传送门主要是通过用户下拉fe.....

文章 2017-01-12 来自:开发者社区

架构评估技术详解

在软硬件系统总体架构设计完成之后,为保证架构设计的合理性、完整性和针对性,从根本上保证系统质量,降低成本及投资风险,需要对总体架构进行评估。  1、架构评估内容  (1)对软件的架构评估  对软件的架构评估,主要是根据具体的评估依据,看软件设计是否符合体系化设计原则;产品中所开发的软件是否易于升级,是否满足可扩展性强等要求。  (2)对硬件的架构评估  对硬件架构的评估,主要是根据具体的评估依据....

文章 2017-01-12 来自:开发者社区

【双11背后的技术】17.5W秒级交易峰值下的混合云弹性架构之路

选自《不一样的技术创新——阿里巴巴2016双11背后的技术》,全书目录:https://yq.aliyun.com/articles/68637 前言 每年的双11都是一个全球狂欢的节日,随着每年交易逐年创造奇迹的背后,按照传统的方式,我们的成本也在逐年上升。双11当天的秒级交易峰值平时的近10多倍,我们要用3-4倍的机器去支撑。但大促过后这批机器的资源利用率不高,到次年的双11会形成较长时...

文章 2016-12-23 来自:开发者社区

ArchSummit2016移动端架构相关技术一些思考

  有幸参加ArchSummit2016全球架构师峰会,作为一名移动端开发人员,比较关注移动端架构相关主题,可惜的是此次会议关于移动端主题太少了,很多都停留在技术表面泛泛而谈,不够深入。除了移动端主题外,还关注了一下新技术方向主题:微服务架构,移动直播,区块链。阿里的技术专场场面火爆,反响不错,本文暂不讨论,主要就集团外几个印象深刻的移动相关技术主题聊聊自己的一些感受,比较杂。 移动架构设计变化....

ArchSummit2016移动端架构相关技术一些思考
文章 2016-12-14 来自:开发者社区

当下流行架构中的一些技术思考

标签(空格分隔): ArchSummit2016 [toc] 时间:2016.12.2-2016.12.3地点:北京ArchSummit会场人物:行业内的讲师&参会人员 总体趋势 ArchSummit全球架构师峰会,在初冬的北京举行。我们一伙人奔着雾霾和技术前沿的理想追逐而去。我先聊聊这次的一个整体情况。两天行程,安排了密密麻麻的专题和演讲,但是总结来看,基本上是云计算、大数据、微服务.....

当下流行架构中的一些技术思考
文章 2016-11-03 来自:开发者社区

分布式领域架构师要掌握的技术

分布式系统无疑是持久的热门话题,但其实如果不是一定有必要,强烈建议不要进入分布式领域,在集中式的情况下很多问题都会简单不少,技术人员千万不要因为外界火热的例如微服务,就把自己的产品的也去做改造,一定要仔细判断是否有必要,不要为了技术而技术,那么在必须分布式的情况下(访问量、存储量或开发人数),一个分布式领域的合格的架构师要掌握哪些技术呢,这篇文章就聊聊这个话题。 简单重复下我对架构师的标准,一.....

问答 2016-09-14 来自:开发者社区

分享一个技术大会-SDCC2016大数据技术架构实战峰会(杭州站)

      会议通知   SDCC2016大数据技术&架构实战峰会(杭州站)是由CSDN主办的顶级技术盛会,大会目的是促进更加深入的业内同行技术交流,传播先进技术理念。SDCC2016·杭州站为期两天,主要面向对大数据&架构技术感兴趣的中高端技术人员,将秉承干货实料(案例)的内容原则,聚焦技术实践,结合业务,邀请业内顶尖的...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

金融级分布式架构

SOFAStack™(Scalable Open Financial Architecture Stack)是一套用于快速构建金融级分布式架构的中间件,也是在金融场景里锤炼出来的最佳实践。

+关注