文章 2024-06-02 来自:开发者社区

深入探究Apache Spark在大数据处理中的实践应用

引言:在大数据时代,数据的处理和分析能力已成为企业竞争力的关键。Apache Spark作为当前最热门的大数据处理框架之一,凭借其快速、高效和灵活的特性,已广泛应用于各个行业。本文将深入探讨Apache Spark的内部机制、核心组件以及在实际大数据处理中的应用,旨在为读者提供一份详尽的Spark使用指南。 一、Apache ...

文章 2023-07-20 来自:开发者社区

Apache Flink 在翼支付的实践应用

摘要:本文整理自翼支付高级大数据工程师尹春光,在 Flink Forward Asia 2022 行业案例专场的分享。本篇内容主要分为五个部分: 公司实时业务场景 平台介绍 架构实践 应用场景 未来展望 点击查看原文视频 & 演讲PPT 一、公司实时业务场景 天翼电子商务有限公司(以下简称“翼支付”)是中国电...

Apache Flink 在翼支付的实践应用
文章 2023-05-25 来自:开发者社区

《Apache Flink 案例集(2022版)》——5.数字化转型——翼支付Apache Flink 在翼支付的实践应用(上)

用户背景 翼支付是中国电信的全资子公司,公司主要业务分为民生缴费、消费购物、金融理财,同时依托云计算、大数据、人工智能等技术手段,赋能线上及线下的商户。公司主要的业务板块分为数字生活、数字金融及金融科技服务。 业务需求 目前,翼支付的月活用户数为 5000万+,存量用户数 5 个亿+,线上的服务器大约 4000 台,每日的记录数为千亿条。随着公司的业务规模不断扩展,翼支付面临的业务挑战也在不断增....

《Apache Flink 案例集(2022版)》——5.数字化转型——翼支付Apache Flink 在翼支付的实践应用(上)
文章 2023-05-25 来自:开发者社区

《Apache Flink 案例集(2022版)》——5.数字化转型——翼支付Apache Flink 在翼支付的实践应用(下)

《Apache Flink 案例集(2022版)》——5.数字化转型——翼支付Apache Flink 在翼支付的实践应用(上) https://developer.aliyun.com/article/1227825生产实践 在实践过程中翼支付遇到了很多挑战,总结起来主要是业务 State 数据一致性、指标重复计算问题、动态规则配置以及全链路监控监控问题。   首先是指标作业升级过程....

《Apache Flink 案例集(2022版)》——5.数字化转型——翼支付Apache Flink 在翼支付的实践应用(下)
文章 2022-03-29 来自:开发者社区

Apache Flink 在翼支付的实践应用

摘要:本文整理自翼支付高级开发工程师曹劼、尹春光在 Flink Forward Asia 2021 平台建设专场的分享。本篇内容主要分为四个部分:公司简介实践中的问题案例实践未来规划点击查看直播回放 & 演讲PDF一、公司简介翼支付是中国电信的全资子公司,公司主要业务分为民生缴费、消费购物、金融理财,同时我们依托云计算、大数据、人工智能等技术手段,赋能线上及线下的商户。公司主要的业务板块....

Apache Flink 在翼支付的实践应用
文章 2019-11-04 来自:开发者社区

中国Cassandra技术社区第一届Meetup:Apache Cassandra 技术揭秘及实践应用

由中国 Cassandra 技术社区主办,阿里云、DataFun协办的中国Cassandra技术社区第一届Meetup:Apache Cassandra 技术揭秘及实践应用将于2019-11-16日在北京举行,来自阿里云、ScyllaDB、360等4位嘉宾的核心技术分享。 活动时间:2019-11-16 13:30 ~ 17:30活动地点:北京市朝阳区阿里中心-望京A座 20F-02 九华山庄活....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!

+关注
相关镜像