课题研究 数据安全与隐私保护 子课题01 · 第06页 / 共9页
01子课题 · 数据分类分级与数据安全治理

分类分级技术落地工具链第06页

制度与标准解决"应该怎么做",工具链解决"如何可持续地做到"。本页系统研究分类分级的技术实现:数据发现与资产测绘如何覆盖数据库、数仓、文件、对象存储、SaaS与API等异构数据源;敏感数据识别技术(规则/字典/正则、NLP实体识别、OCR、数据指纹)的准确率边界与组合策略;打标与元数据管理;标签驱动加密、脱敏、DLP、访问控制、审计与水印的联动矩阵;数据地图与血缘的影响分析价值;治理平台参考架构与选型要点;以及导致项目失败的常见模式与对策。

数据发现敏感数据识别NLP/OCR/指纹数据打标策略联动DLP数据脱敏数据地图数据血缘治理平台第06页 / 共9页
本页要点发现→识别→打标→联动→审计 全链路技术架构
适用读者安全架构师、数据平台团队、技术选型决策者
前后页‹ 第05页 治理体系 | 第07页 重要数据管控 ›

01 · 数据发现与资产测绘

发现是分类分级的起点。实践中最大的盲区不是"扫不到已知库",而是"根本不知道的数据源"——影子数据。发现范围应覆盖:

数据源类型典型形态发现要点
关系/NoSQL数据库MySQL、Oracle、PostgreSQL、MongoDB等网络扫描+端口识别;优先纳管生产库与备份库
数据仓库/大数据平台Hive、ClickHouse、数据湖、实时数仓元数据API拉取表结构与分区信息;关注ODS/DWS分层
文件与对象存储共享NAS、FTP、对象存储桶、网盘桶/目录级清点+内容采样;开放权限桶是排查重点
非结构化文档Office文档、PDF、图纸、图片内容解析+OCR;重点关注财务、人事、研发目录
SaaS与云端企业微信/钉钉文档、CRM、HR SaaS、云数据库SaaS导出盘点+云配置核查(公开实例、跨账号共享)
API与数据服务REST接口、数据订阅、消息队列API网关清单+流量抽样;识别对外供数的字段构成
终端与移动介质办公终端、U盘、移动硬盘终端DLP探针+外设管控;泄露高发面
  • 扫描策略:全量首次盘点+增量周期巡检;生产环境选择业务低峰期、只读账号、采样优先,避免扫描本身影响业务。
  • 资产登记:每个数据源登记"位置—负责人—业务归属—量级—敏感度初判",形成数据资产台账(第3页SOP第一步的输出物)。
  • 影子数据治理:通过网络流量分析(数据库协议识别)发现未登记实例;将"未登记即违规"纳入制度并配套整改通道,而非简单关停引发业务对抗。

02 · 敏感数据识别技术

识别技术决定自动打标的可信度。没有单一技术能通吃全部数据类型,可靠方案是多层组合+置信度分级:

技术路线原理优势局限
规则/正则/关键字身份证号、手机号、银行卡号等格式化字段的模式匹配(含校验位算法)精度高、可解释、资源消耗低只能识别已知格式;加密/变形数据失效;误报依赖规则调优
数据字典/词库字段名/注释/内容匹配敏感词库(病历、薪资、密码等)覆盖非格式化语义;易维护词库膨胀导致误报;跨行业语义差异大
NLP实体识别命名实体识别与语义分类模型,识别非结构化文本中的敏感实体理解上下文(如"艾滋病史"在病历语境中敏感)需要领域标注数据训练;可解释性弱;需持续运营
OCR扫描件、图片、截图中的文字识别后再走规则/NLP打通纸质/图像数据识别精度受图像质量影响;计算开销大
数据指纹对已知敏感数据集生成指纹(哈希/相似哈希),在全量数据中匹配派生副本发现敏感数据的副本、变体与泄露残留只能发现"已知的已知";指纹库需维护
列级统计画像对未知字段做值分布分析(唯一性、格式熵、取值域)推断语义应对"字段名乱命名"的老系统推断置信度有限,需人工确认

2.1 准确率治理:误报与漏报的平衡

  • 分层处置:高置信度(规则命中+校验位通过)→自动打标;中置信度→批量人工复核;低置信度→抽样复核。把人工精力集中在高价值数据上。
  • 双向指标:同时跟踪"误报率"(浪费复核成本)与"漏报率"(合规风险),仅看识别准确率会掩盖漏报。
  • 持续运营:业务新术语、新数据形态要求规则/模型季度迭代;识别效果纳入第8页KRI指标体系监控。

03 · 打标与元数据管理

  • 打标颗粒度与时机:库/表/字段三级+文件级;在数据入仓/入湖的ETL环节嵌入打标钩子,实现"增量数据出生即带标",而非事后补标。
  • 标签服务化:标签写入统一元数据平台,通过API供授权系统查询——加密平台、脱敏平台、DLP按标签决定策略,避免各系统重复维护分级表。
  • 变更一致性:标签变更(升级/降级)触发策略重评估;策略执行结果回写标签状态,形成"标签—策略"双向校验。
  • 与数据目录集成:打标结果同步至数据目录(数据地图),使业务人员检索数据时能直观看到敏感级别与使用约束。

04 · 标签驱动策略联动

标签的价值在于驱动差异化管控。下表为核心联动矩阵(强度按"一般→重要→核心"递增):

控制措施一般数据重要数据核心数据
存储加密基线加密(磁盘/库级)字段级/列级加密,密钥独立管理字段级加密+国密算法+密钥分权管控
访问控制角色权限+最小必要按人按次授权+审批留痕+定期复核双人授权+动态审批+全程审计
脱敏开发测试按需脱敏非生产环境强制静态脱敏原则上不出生产域;确需使用时动态脱敏+水印
DLP外发管控敏感词告警高危通道(邮件/网盘/IM)阻断+审批默认阻断,例外审批至归口部门
审计常规日志全量操作审计+异常行为告警全量审计+实时风控+月度复核
水印溯源—外发文档显性/隐性水印强制多重水印+屏幕水印
备份与销毁常规备份异地备份+可恢复性验证多副本容灾+销毁双人见证+不可恢复验证

注:矩阵为课题建议基线,组织应结合行业细则(第4页)与等保/密评要求(第2页)调整;核心数据的管控以主管部门目录要求为最终依据。

05 · 数据地图与血缘

  • 血缘采集方式:SQL解析(从数仓调度任务与查询日志提取)、ETL工具埋点、API网关日志、消息队列元数据——通常需要多种方式组合覆盖。
  • 核心用途:①影响分析:某字段升级为重要数据时,自动定位其全部下游副本并批量变更标签;②泄露评估:数据泄露事件后快速圈定受影响的数据集与系统;③流通合规:数据共享/出境时提供完整的数据构成与处理链路说明(支撑第7页出境材料)。
  • 成熟度标志:从"表格级血缘"进化到"字段级血缘",是数据地图从展示工具走向管控基础设施的分水岭。

06 · 治理平台参考架构

分类分级平台在组织数据技术栈中的定位(自下而上):

层组成
数据源层数据库、数仓、文件、对象存储、SaaS、API、终端
发现与识别层网络扫描器、元数据采集器、内容解析(含OCR)、识别引擎(规则+NLP+指纹)
标签与目录层标签服务、元数据平台、数据地图、血缘引擎、判定工作流(人工复核流)
策略执行层KMS/加密、脱敏平台、DLP、IAM/权限、数据库审计、水印系统
运营与度量层KRI/KPI看板、合规报告、目录申报支撑、与GRC/审计系统对接

选型要点

  • 存量兼容优先:能否对接现有数仓调度、IAM与SIEM,比功能列表长度更重要;
  • 开放性:标签API、规则引擎可自定义、识别模型可扩展(支持组织私有词库训练);
  • 性能与稳定性:增量扫描窗口、对生产库的压力控制、亿级字段的打标吞吐;
  • 分阶段建设:先"发现+台账"(看得见),再"识别+打标"(分得清),后"联动+运营"(管得住)——避免一次性大平台烂尾。

07 · 常见失败模式与对策

失败模式根因对策
扫描即结束(出一份资产报告就结项)项目制思维,无运营预算与责任人转为运营制:季度增量扫描+指标看板+年度复核(第8页路线图)
打标与策略两张皮标签未服务化,执行系统各自为政标签API统一供数;策略执行回写校验,双向核对
误报淹没复核团队规则一刀切、无置信度分层置信度分层+抽样复核+误报反馈闭环迭代规则
影子数据持续滋生只扫登记过的网段/账号流量旁路发现+未登记数据源整改通道+考核挂钩
老系统补标成本失控试图全量精确识别历史数据风险优先排序+采样识别+随系统改造渐进补标
工具替代治理误以为采购平台等于机制建立同步建设制度、组织与考核(第5页);测评看"机制运行"不看"工具采购"
技术落地五段流水线
从"看得见"到"管得住"的能力递进
说明:流程为课题方法论归纳;各阶段工具形态随组织技术栈而异,关键在链路贯通而非单点功能。

本节参考来源(第6页)

本节为技术方法论归纳,不直接引用具体商业产品;方法论与公开标准/法规的衔接依据如下。

[1]

GB/T 43697-2024《数据安全技术 数据分类分级规则》(打标与结果应用要求):国家标准全文公开系统。

[2]

GB/T 36073-2018《信息安全技术 数据安全能力成熟度模型》"技术工具"能力域:国家标准全文公开系统。

[3]

GB/T 39786-2021《信息安全技术 信息系统密码应用基本要求》(数据加密控制基线):国家标准全文公开系统。

[4]

GB/T 35273-2020《信息安全技术 个人信息安全规范》(敏感个人信息识别参考):国家标准全文公开系统。

[5]

《中华人民共和国数据安全法》第27条(采取相应技术措施保障数据安全):中国政府网。