知鸦日报2026-07-24

Agent Skill 缺少标准化评测，导致行为退化、引擎差异等问题难以发现。skill-up 是一个声明式 CLI 评测框架，通过 expect+judge 分层判定、多引擎支持、多轮会话和结构化报告，让 Skill 质量可声明、可回放、可回归，并已在实际业务中落地。

测试数据构造耗时且易出错，本文提出CTGAN+LLM的混合方案：CTGAN保障枚举字段覆盖率，LLM学习字段间逻辑关系，二者协同生成兼具丰富度与真实性的合成数据，实验验证字段关系与覆盖率显著提升。

快手研发团队从局部AI提效转向全局AI重构，通过知识工程补齐大模型短板，搭建KATE数字员工平台，以需求AI渗透率衡量组织效能。最终实现人均需求交付量提升10%，计划2026年突破80%需求达L2渗透标准。