文章 2025-05-26 来自:开发者社区

StarRocks+Paimon 落地阿里日志采集:万亿级实时数据秒级查询

1.背景 1.1 业务背景 A+ 流量分析平台是阿里集团统一的全域流量数据分析平台。从页面&小站&活动& APP 等作为切入点,在经过埋点、采集、计算后,构建出宏观的概览数据、坑位效果、类目成交转化、路径分析、用户细分等,致力于打造流量数据分析闭环,快速帮助业务发现流量问题&提升流量转化。当前,流量采集团队每天需要的日志数据达到万亿级,在写入和查询...

StarRocks+Paimon 落地阿里日志采集:万亿级实时数据秒级查询
阿里云文档 2025-05-20

授权自定义角色写数据到MaxCompute(跨账号投递)

MaxCompute投递任务(新版)运行时,需要将从Logstore中读取的数据投递到MaxCompute的表中,您可以授权MaxCompute投递任务(新版)扮演自定义RAM角色完成该操作。本文介绍在MaxCompute和日志服务Project不同账号时,如何对自定义RAM角色进行授权。

阿里云文档 2025-05-19

授权默认角色写数据到MaxCompute(跨账号投递)

MaxCompute投递任务(新版)运行时,需要将读取到的Logstore数据投递到MaxCompute表中,您可以授权MaxCompute投递任务(新版)扮演默认角色完成该操作。本文介绍在MaxCompute和日志服务Project不同账号时,如何对默认角色进行授权。

阿里云文档 2025-04-14

如何查看推送数据日志

本文为您介绍推送数据日志功能,服务实例提供了推送数据日志页签,无论计量数据是通过主动推送还是自动推送,所有数据都将被记录在推送数据日志中。让用户和服务商能够方便地查看按量计量推送数据的内容。

阿里云文档 2025-04-11

如何实现数据格式标准化

您可以通过SPL指令和SQL函数过滤与清洗您所采集的海量日志数据,实现数据格式标准化。本文介绍过滤与清洗数据的常见场景和相关操作。

阿里云文档 2025-03-14

如何通过Python sdk查询Logstore中的日志数据

调用GetLogsV2接口查询指定Project下某个Logstore中的原始日志数据,返回结果显示某时间区间中的原始日志(返回结果压缩后传输)。

文章 2024-08-22 来自:开发者社区

AI大模型独角兽 MiniMax 基于阿里云数据库 SelectDB 版内核 Apache Doris 升级日志系统,PB 数据秒级查询响应

作者:MiniMax 基础架构研发工程师 Koyomi、香克斯、Tinker 导读:早期 MiniMax 基于 Grafana Loki 构建了日志系统,在资源消耗、写入性能及系统稳定性上都面临巨大的挑战。为此 MiniMax 开始寻找全新的日志系统方案,并基于 Apache Doris 升级了日志系统,新系统已接入 MiniMax 内部所有业务线日志数据,数据规模为 PB 级, 整体可...

AI大模型独角兽 MiniMax 基于阿里云数据库 SelectDB 版内核 Apache Doris 升级日志系统,PB 数据秒级查询响应
问答 2024-08-21 来自:开发者社区

ARMS的rum的日志数据这里能用sql去查询吗?

ARMS的rum的日志数据这里能用sql去查询吗?

问答 2023-01-17 来自:开发者社区

客户使用dataphin同步数据至sls中,日志显示10条数据都成功了,但是查询无数据,怎么办?

客户使用dataphin同步数据至sls中,日志显示10条数据都成功了,但是查询无数据,怎么办?

问答 2022-05-30 来自:开发者社区

使用 Nginx 模式采集日志实验中接入数据时,在结束页面单击查询日志后应进行什么操作?

使用 Nginx 模式采集日志实验中接入数据时,在结束页面单击查询日志后应进行什么操作?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云日志服务SLS

SLS是一站式云原生可观测性数据平台,一站式提供数据采集、加工、查询与分析、可视化等功能。日常更新产品最新动态,最佳实践以及技术大咖的观点和经验。

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等

登录插画

登录以查看您的控制台资源

管理云资源
状态一览
快捷访问