HKBEUPDATA PASSAGE / HK-BEUP

数据治理

数据字典为什么比文件名更能决定协作质量

字段名称相同不代表含义相同;单位、缺失值、时间窗口和纳入条件才决定数据能否合并。

文件名无法说明字段含义

同一个“age”字段可能表示入组年龄、确诊年龄或当前年龄;同一个“status”也可能对应事件、审核或设备状态。文件可以顺利合并,语义却已经错位。数据字典负责把名称、单位、取值和时间点写清楚。

协作前应先挑选关键字段进行对读。若双方无法用一句话解释字段来自何时、由谁记录、缺失值代表什么,就不适合直接进入联合模型。

版本变化需要留下原因

研究过程中常会修正编码或纳入条件。覆盖旧字典会让早期结果失去解释依据。较稳妥的做法是保存版本号、生效日期、变更原因和受影响任务,并让每个节点确认已切换。

当单位从毫克改为克时,程序可能不会报错,但结果会产生数量级偏差。语义检查应进入任务启动条件,而不是留到结果异常后再补做。

字典也是沟通接口

好的数据字典不追求篇幅,而是让统计人员、临床人员与工程人员对同一字段形成共同理解。示例值、允许范围和来源系统往往比抽象定义更有帮助。

在跨机构环境中,保留节点特有字段并不等于失败。可以建立共同核心字段,再明确哪些扩展信息只在特定节点可用。