知鸦日报2024-03-22

本文将针对如何构建出完整、可靠、可维护的“广告更新数据流”进行展开叙述。

微服务化下的自动化测试微服务化下，环境的变化也是双刃剑。拆分出来的服务增加了接口的复杂性，导致接口数量膨胀，单元测试在微服务化下也发生了变化。

通过云平台达成实机操作的全替代

一个通过智能体完整地对HDFS集群进行问题诊断的案例。

抖音精准推荐查询效率如何提升百倍？

本文旨在介绍钉钉 Android 团队死循环检测工具建设的思路和典型案例的修复历程。希望通过此次分享，对同样面临类似死循环问题的团队能够有所启发。

标签挖掘的探索实践。

作为个性化推荐系统重要的一环，构建一个成熟、健全、相互关联的标签体系至关重要。相较于粗粒度分类，标签可以更为灵活、精准地定义人或物的多属性，宛若一根根线头，穿穿绕绕，勾连起这个世界。程序眼中万物皆对象，而在标签建设者眼中，则万物皆可有标签。

在互联网的下半场，精细化运营将是长久的主题，有数据分析能力才能让用户得到更好的体验。

周元炜 去哪儿网 数据挖掘高级经理

方剑冰 快手 推荐系统架构师

袁敏 哔哩哔哩 资深开发工程师

权限体系在中后台系统中至关重要，本文将围绕权限做一个介绍并分享下 RBAC 模型在项目中的实践。

账号权限是ToB产品的基石，如何打造统一的账号权限平台支撑各产品线复杂多变的登录和权限管控诉求？本文介绍了鲁班团队通过账号权限平台的设计与实践赋能ToB垂类多个产品线，重点介绍了单点登录、复杂的功能和数据鉴权中关于可配置可扩展的思考与落地。

点击“小米云技术” 关注后续文章小米数据流服务，依托于流式消息队列Talos，主要用于解决数据收集和数据中转问题而研发。目前已经在小米生态云和小米融合云上线，并且已经支持许多数据业务。

分享我们重构微信的一点点经验

在深入Vuex原理(上)中，我们回答了 “Vuex 的 store 是如何注入到组件中的？” 的问题，下面我们继续对以下问题进行探讨！

让LiveData解决你的后顾之忧。

通过使用状态机，提升交易系统的稳定性、可扩展性、可维护性。

承接​《字节跳动自研强一致在线 KV \x26amp;表格存储实践 - 上篇》，继续展开对于关键技术中的分布式事务、分区自动分裂和合并、负载均衡这几个技术点的讨论。

改善页面内的协作效率，我们选择：使用开源的XState方案来完成页面协同开发

微视这种富媒体形态的短视频平台，是如何通过视频内容特征以及用户属性和行为数据，来精准预测用户对短视频的喜好的？

特征工程在推荐系统中有着举足轻重的作用，大规模特征工程处理的效率极大的影响了推荐系统线上的性能。第四范式面向大规模特征工程问题开发了下一代离线在线一致性特征抽取引擎FESQL。

在伴鱼，我们在多个在线场景使用机器学习提高用户的使用体验，例如：在伴鱼绘本中，我们根据用户的帖子浏览记录，为用户推荐他们感兴趣的帖子；在转化后台里，我们根据用户的绘本购买记录，为用户推荐他们可能感兴趣的课程；等等。 特征是机器学习模型的输入。如何高效地将特征从数据源加工出来，让它能够被在线服务高效地访问，决定了我们能否在生产环境可靠地使用机器学习。为此，我们搭建了特征系统，系统性地解决这一问题。

数据仓库有四个基本的特征：面向主题的、集成的、相对稳定的、反映历史变化的。其中数据集成是数据仓库构建的首要前提，指将多个分散的、异构的数据源整合在一起以便于后续的数据分析。将数据集成过程平台化，将极大提升数据开发人员的效率，本文将向大家介绍伴鱼基于 Flink 构建的「数据集成平台」的设计与实现。 A data warehouse is a subject-oriented, integrate

背景伴鱼绘本发布至今已有 5 年，作为一款主要面向儿童的 App，其包含大量游戏化场景和多媒体资源来保证内容的趣味性、丰富性。我们的产品面向海内外用户，统计发现 iOS 设备中约 3 成是已发布 5 年以上的旧设备。旧的设备意味着 CPU 运算能力差、内存小，同时国外网络环境相较于国内要差。所以在保证产品趣味性和丰富性的同时，我们要让程序维持优秀的用户体验，在各种不同性能的设备上流畅运行。

1. 背景在伴鱼，我们努力了解我们的用户，旨在为用户提供更好的服务。APP 内容推荐，需要根据用户特征来决定推送内容；促销活动，需要针对不同的用户群体设计不同的活动方案；线上产品售卖，也需要了解用户喜好，才能更好地把产品卖给用户。 为此，我们搭建了用户画像平台。本文将首先探讨平台的功能需求、标签体系定位，随后介绍平台的架构和具体功能实现。

背景伴鱼后端服务采用微服务架构部署，目前在服的服务有 800+。在 2019 年，公司就引入 Jaeger，搭建自己的调用链追踪系统，目前每天写入的数据接近 100 GB / 天。但系统在实际生产使用中，依然不甚满意，主要症结在于： 系统采用头部连贯采样（head-based coherent sampling）的 Rate Limiting限流采样策略，即在 trace 的第一个 span 产

在大众点评的用户中，有相当高比例会通过搜索来查找本地信息，而内容搜索是辅助用户决策、促进社区氛围的重要工具。本文介绍了大众点评内容搜索算法优化的探索与实践。

核心理解与使用方法

本文分享哈啰算法实时化2.0建设实践，包括流式预测建设、实时特征模版化建设和接入场景介绍。