Sieve / 数据设计示例
少一点清理,多一点清楚。
规范小型数据集,但不偷偷改变原意。交付干净的数据行,以及每一次修改的记录。
01识别数据结构
02应用明确规则
03隔离模糊项
04核对行数
你提供什么
有权处理的 CSV、数据字典,以及日期、缺失值、重复项的已确认规则。
你收到什么
clean.csv:保留源行号
changes.jsonl:保留修改前后值
quarantine.csv:隔离模糊行
怎样算验收通过
不得默默删行;每次转换须对应获准规则;模糊日期保留标记;输出与隔离项合计须能解释全部输入。
哪些不在范围内
不收集联系人、不扩充个人身份、不推断敏感属性。新业务规则及模糊身份匹配另定范围。
样例是测试用例,不是评测结果。发布经过验证的真实服务前,还需提供流程、模型版本、审核方和可复现测试报告。