从人工到AI驱动-快手广告流量全链路可观测实践
如果无法正常显示,请先停止浏览器的去广告插件。
1. 从 到AI驱动
快 告流量全链路观测实践
鲜嘉麒
/商业化架构
快
2.
3. 录
01
成式技术驱动
告链路
动化
成
探讨:如何提升可观测交付完整性
4. 01
告推荐链路的
消耗与成本率归因
5. 告推荐链路的可解释性问题
转化
志
计费库
模型持续训练
调价
消耗/成本率异动
6. MTL在 告收
参竞率
参竞
缓存
3
Log+
• 报
/
志现场分析
• 离线数据现场分析
7. 模型在运维场景下的适
发
8. 快
代码理解MCP
产LoRA
链路
指标剪枝LoRA
志检测Agent
链路分析Agent
链路
产模型
策略
存储巡检Agent
产Agent
产模型
字段布局LoRA
链路理解LoRA
9. 收
可
性:63%
根因分析
根因决策Agent
解决
案Agent
10. 02
数据采样分析
扩展多渠道观测指标
11. 接
例稳定
"data": {
"creative_id": "CR_20230828_0001",
"audit_status": "PENDING", 不为空,格式统
//
成的创意 ID
// PENDING/APPROVED/REJECTED
正数、浮点格式
时间格式、数组
度稳定
例稳定
// 0 表示成功,其它为错误码
"estimated_ctr": 0.023,
"estimated_cvr": 0.006,
"estimated_cpm": 45.0,
"predicted_daily_spend": 4800,
"recommended_bid": 3.20,
}
分布
"code": 0,
"msg": "success",
“trace_id": "R20230828103215999",
}
//
//
//
//
//
//
于链路追踪
预估点击率
预估转化率
预估千次曝光成本(元)
预估 消耗(元)
系统建议出价(元)
不为空
浮点格式
分布稳定
12. 离线数据的分析价值
数据类型
注释
creative_id STRING 创意ID,业务主键
creative_name STRING 创意名称
creative_code STRING 创意编码,
description STRING 创意描述,详细说明
landing_page_url STRING 落地
creative_type STRING 创意类型:BANNER/VIDEO/NATIVE等
industry STRING 所属
status STRING 创意状态:ACTIVE/PAUSED/DELETED
audit_id STRING 审核记录ID
audit_status STRING 审核状态:PENDING/APPROVED/REJECTED
audit_score INT 审核得分,0-100分
create_time TIMESTAMP 创建时间
于投放识别
案
URL, 户点击后跳转地址
业分类
分布
例稳定
13. 业务
异常数量分布合理
14. 指标
注释
2024-05-29 10:12:05.147 [DEBUG] CreativeValidator - Creative assets
validated successfully, resolution=1080x1920, size=312 KB
案
业分类
志结构化问题
实时性问题
Metric: 告物料 库数量
Label:创意类型、 业分类、状态…
Value:32000
2024-05-29 10:12:05.190 [ERROR] AdRepository - Failed to persist
ad record (campaignId=12345). cause=DuplicateKeyException:
unique constraint "uk_campaign_name" violated, retry=0/3
Metric: 告物料 库失败量
Label:失败原因…
Value:560
15. 指标
产LoRA
成
Metric: 告物料
指标维度 成 Label:创意类型、
统计SQL 成 Value:32000
成指标的名称、查询SQL。
库数量
业分类、状态…
16. 告警策略
产LoRA
例检查
数组
度检查
字段格式检查 空状态检查
数值合理区间检查 异常值分布检查
成
17. 字段值分布特征异动探测
标
户为18-25岁年龄段群体」
告投放数量分布合理性预测
18. 异动检测降噪
持续
原
缓慢上升
19. 巡检告警效果
报
异动检查告警示例
数据异动检查告警示例
20. 异动检查Agent
字段
2
21. 全链路异动巡检
数据异动检查
• 准确率90%+
22. 03
成式技术驱动
动化梳理
23. 业务链路和系统链路
系统链路示例
系统链路
缓存
表达技术节点数据流向的链路,定位系统问题根因节点。
关键词:强弱依赖、剪枝、根因定位、系统指标
离线计算任务
MQ
数据库
服务
业务链路示例
业务链路
表达指标逻辑关系的拓扑,
于看清影响
和定位业务原因。
关键词:关联指标、业务指标、结果指标、过程指标
24. 基于链路的多级下钻归因
告系统链路
客户库
参竞接
调
可
性:63%
参竞
缓存
25. 梳理链路的痛点
归因准确性低
动化梳理
26. 系统链路
成-在离线链路打通
在线链路版本
在离线版本
27. 系统链路
动布局
28. 业务链路
E
B
D
F
G
数据采集指标
H
成
基于系统调
关系串联业务指标拓扑
I
29. 业务链路
成
业务链路
系统链路归因可视化
30. 系统链路
巡检Agent
问题归因
消耗/成本率异动
持续训练
户微调与采纳
31. 04
未来展望
32.
33. 探讨:如何提升可观测交付完整性
传统系统运维交付
平
业务交付
运维交付
欢迎加V交流
AIOPS系统运维交付 平
业务交付
运维交付
数据融合+AIGC+推荐
更多可观测AIGC实践资讯
请关注:快 技术公众号
34. THANKS
模型正在重新定义软件
Large Language Model Is Redefining The Software