人类游乐园
106.63M · 2026-04-16
作为观测云用户,在日常使用过程中,当您有长期归档日志、审计数据以满足合规留存要求、需要将观测云数据同步至其他系统进行二次加工分析,或是希望实现指标、链路等实时数据的多系统订阅与联动时,就可以用到观测云的数据转发功能。
在实际使用中,您可以结合观测云数据热存分析与长期存档的核心场景选择数据转发:
本文结合观测云 SaaS 平台特点,帮您梳理数据转发核心最佳实践,聚焦实用配置与落地步骤,助力您快速落地需求、规避误区。
观测云主要支持多种云平台的对象存储(包括阿里云 OSS,AWS S3,华为云 OBS,火山云 TOS 等)与 Kafka 两种转发目标,二者适配不同业务场景。如果使用观测云 SaaS 平台,观测云平台底座部署在公有云(如阿里云、腾讯云、华为云等),选型时可以优先选择与观测云 SaaS 同厂商、同区域的目标服务,或通过虚拟网络打通连接,最大限度降低网络延迟、减少公网带宽消耗,提升数据传输安全性。
| 目标类型 | 适用场景 | 观测云适配建议 |
|---|---|---|
| 对象存储(OSS/S3/OBS/TOS) | 日志、审计、事件的长期归档、低成本冷备,以及需满足合规留存要求的场景 | 优先选择观测云 SaaS 部署所在厂商、同区域资源,或通过VPC打通内网连接 |
| Kafka | 指标、链路、实时事件的实时流处理、多系统订阅、数据二次加工,以及告警联动场景 | 优先选用观测云 SaaS 所在厂商的托管Kafka,同区域部署,通过虚拟互联网打通内网访问 |
具体配置可以参考:
规则配置是数据转发的核心,需遵循“分类配置、精准过滤、适配观测云 SaaS 特性”原则,聚焦观测云侧操作,结合高频场景落地步骤,简化冗余配置,确保高效可控。
1、按数据类型拆分规则:登录观测云控制台,进入【管理】-【数据转发】页面,点击【新建规则】,每次仅选择一种数据类型(日志/链路/RUM/事件/审计事件等),单独创建规则,避免数据混杂。
2、精准过滤配置:在“过滤条件”模块,可通过数据所带的标签,例如日志 source、host、service 等标签筛选,仅转发有用数据,从而避免无效的数据增加转发流量和存储成本。
3、需要注意的是,如果需要使用观测云的 Pipeline 解析数据,同时将解析后的字段进行转发,可以使用观测云的中心 Pipeline 脚本:在创建 Pipeline 脚本时,可勾选“启用 Pipeline 处理转发数据”:勾选后,数据先经脚本处理再过滤转存;不勾选则直接转发原始数据。
对象存储选型对比(观测云默认对象存储 vs 公有云自有对象存储):
具体配置方式:
1、新建规则选择对象存储的类型,如果选择了自己云平台的对象存储(如阿里云 OSS),填写云平台和存储桶等相关信息。具体配置方式可以参考在线文档:docs.guance.com/management/…
需要注意的是权限控制:
2、路径与优化:仅需在“存储路径”中输入自定义前缀(如guance-log-backup/),系统自动按“工作空间/数据类型/规则名/年月日时”生成完整路径,方便您在对象存储桶中后续的调用和查看。
3、可以点击“测试连接”进行配置的验证测试
1、基础配置:新建规则选择“Kafka 消息队列”
2、输入相关信息:
Host:Port,多个节点使用逗号间隔;3、点击“测试连接”,若上述信息满足规范,则提示测试连接成功。点击确定即可保存当前规则。
观测云数据转发是“精准选型、精细配置、成本可控、权限安全”,结合其 SaaS 特性,优先选择同厂商同区域转发目标,或打通虚拟互联网连接,按数据类型拆分规则并精准过滤,同时做好权限管控,即可快速落地数据转发、存档和二次分析的需求,发挥数据价值,支撑企业合规留存与业务优化。