隐私保护核心 20% — 先分清”数据在哪一层”

一句话:隐私工程 80% 的坑,都来自没分清数据处于收集、存储、使用、发布哪一层。层次清楚之后,技术选型就不再靠猜。


🎯 这 20% 能解决哪些问题

常见困惑本质本页答案
把姓名删掉就算脱敏了吗混淆删除与不可复原见「脱敏、假名化、匿名化」
差分隐私、联邦学习、同态加密该选哪个把它们当成同一层的替代品见「四类技术决策表」
用户同意书签了就没问题了忽视最小必要与目的限制见「合规四原则」
模型训练完把原始数据删掉就安全忽视模型本身会记住数据见「模型也是数据出口」
打印日志时顺手记了手机号隐私泄露多发生在非核心链路见「十条操作红线」

一、数据四层模型

graph LR
    A["① 收集<br/>能少则少"] --> B["② 存储<br/>加密隔离"]
    B --> C["③ 使用<br/>最小权限"]
    C --> D["④ 输出<br/>聚合发布"]
    D -.->|泄露风险回灌| A
层次主要风险关键动作
收集过度采集、默认勾选字段级审批,能不用就不用
存储明文落库、备份外泄加密、分库、保留期限
使用越权查询、训练滥用最小权限、审计日志
输出报表反推个体聚合、加噪、抑制小样本

层次判断法:拿到一个隐私问题,先问”它发生在哪一层”。90% 的争论会因此自动收敛。


二、脱敏、假名化、匿名化

手段做法可复原适用
脱敏遮蔽部分字符(138****8888)否,但信息未必不可推断展示层
假名化用假 ID 替换直接标识是(有映射表)分析层、需回查
匿名化破坏可识别性,不可复原否对外发布、科研

三条铁律:

  1. 删除直接标识(姓名、手机号、身份证)≠ 匿名化,准标识(年龄+邮编+性别)组合起来常能唯一定位到人。
  2. 映射表必须与数据分离存放,否则假名化退化为脱敏。
  3. 匿名化结果要防差分攻击:同一人出现在两个数据集,比对即可去匿名化。

三、四类隐私技术决策表

场景选什么为什么主要代价
对外发布统计报表差分隐私有可证明的隐私保证精度下降、需管理隐私预算
多方数据不能出域,但要联合建模联邦学习原始数据留在本地通信开销、仍可能被梯度反演
数据必须存第三方(云),但要在密文上算同态加密计算方全程看不到明文慢 2–4 个数量级,仅适合小模型/简单算子
两方各持一部分数据,要联合求出结果安全多方计算谁都不泄露输入协议复杂、参与方需在线

选型顺序(从便宜到贵):先问能不能不收集 → 再问能不能聚合后再用 → 再问能不能本地计算只传参数 → 最后才考虑同态加密与 MPC。

常见错误:为了”技术先进”直接上同态加密,结果性能不达标,项目下线。能用聚合解决的,别用密码学。


四、差分隐私的两件事

概念含义实践建议
ε(隐私预算)越小越私密,噪声越大内部报表常用 ε ∈ [0.1, 1],先定业务可接受误差再反推
组合性质多次查询的预算可累加必须集中记账,否则重复查询等同零保护

必踩的坑:

  • 只对小样本表格加噪,重复发布不同切片 = 预算被无限消耗。
  • 把 ε 写进论文却不说清楚是 RDP 还是 (ε,δ)-DP,结果无法复核。
  • 局部差分隐私(LDP)在稀疏数据上噪声淹没信号,慎用。

五、联邦学习的真实风险

风险说明缓解
梯度反演从上传的梯度可重建训练样本图像安全聚合、梯度裁剪、加噪
成员推断判断某人是否在训练集差分隐私训练、正则化
参与方投毒恶意节点上传错误梯度鲁棒聚合(中位数、截尾均值)
激励缺失没人愿意白贡献数据贡献度量化 + 收益分配

一句话:联邦学习不等于隐私保护,它只是”数据不出域”。要不要再加 DP 和安全聚合,取决于对手强度。


六、合规四原则(GDPR / 个人信息保护法通用)

原则落地动作
最小必要每个字段写明业务用途,无用途即删
目的限制数据用途变更需重新取得同意
存储期限到期自动删除,写进系统而非制度
可问责留下数据处理记录(谁、何时、为何)

用户权利三件套:查阅、更正、删除。系统设计时就应支持按用户 ID 一键导出与删除(含备份与模型训练集)。


七、模型也是数据出口

泄露途径表现缓解
记忆化大模型复述训练集中的手机号、身份证训练前去重与脱敏、输出侧过滤
成员推断用置信度判断样本是否在训练集DP-SGD、温度缩放
提示注入套取诱导模型吐出系统提示与上下文输入输出双向过滤、权限隔离

新手最容易忽略:把用户对话直接喂给模型做微调,等于把隐私写进权重。


八、十条操作红线

#红线
1生产库不直连个人设备,必须经网关与脱敏层
2日志默认脱敏,禁止记录完整身份证、银行卡、密码
3测试环境不得使用真实个人数据
4导出的 Excel/CSV 必须审批并设定有效期
5任何”临时查询”也要走审计
6模型训练集需登记来源与授权
7第三方 SDK 需列出采集字段清单
8数据删除需覆盖备份、缓存、索引
9上线前做一次”假如数据泄露”的复盘演练
10隐私影响评估(PIA)在立项阶段做,不是上线前补

📋 一页速查

问题答案
先做什么分清数据处于哪一层
删除姓名算脱敏吗不算,准标识仍可重识别
报表对外发布用什么差分隐私 + 小样本抑制
联合建模不能出域用什么联邦学习(加安全聚合)
云上密文计算用什么同态加密,注意性能代价
联邦学习能替代 DP 吗不能,只解决数据不出域
谁最容易泄露隐私日志、导出、模型训练集

🔗 相关链接

主题链接
AI 伦理概览AI伦理与安全
安全性安全性核心 20%
公平性公平性核心 20%
可解释性可解释性核心 20%
安全合规AI安全合规