案例 01
DCC
规则驱动、全程可审计的数据清洗中心
数据清洗
规则驱动
单元格审计
可复现流程
GPL ≥ 2
■ 问题背景
调查与测评原始数据常来自多种文件格式和字符编码,还会混有越界值、漏答、直线作答、异常作答时长以及多套试卷题号不一致等问题。零散脚本会把修订逻辑埋在代码里,难以复核某个值为何被改、由谁规定、能否完整重跑。
■ 解决方案
- 以版本化规则执行范围、集合与表达式检查,并识别漏答、直线作答、作答时长、陷阱题和得分异常。
- 先检测、后执行;排除、置空、重编码和标记动作必须显式映射到规则,未处理发现不会被静默忽略。
- 原始数据保持不变,每次修改都记录旧值、新值、规则、方法和 finding_id;清单与哈希支持一键复现。
- 支持常见表格与统计文件、分块处理、计分、多卷题库对齐以及自包含 HTML 报告。
■ 成果与价值
把“清洗过的数据”升级为“可解释、可追踪、可重跑的数据产品”,让项目负责人、分析人员和审计人员看到同一条证据链。
对您的项目意味着什么:可按您的数据规则定制可辩护的清洗流水线,同时避免把项目判断藏进不可复核的脚本。