Policy Zones: How Meta enforces purpose limitation at scale in batch processing systems
摘要
Meta开发了隐私感知基础设施(PAI)和策略区域(Policy Zones),用于大规模批处理系统中数据用途的限制。通过运行时执行和SQL解析,策略区域在每日数百万数据流中传播和执行隐私注释,每小时进行数万亿次用户同意检查,并处理每小时数百PB的数据流。该系统帮助工程师快速响应隐私需求,确保数据处理的合规性,同时减少隐私合规带来的摩擦。