Back to all writing
03 / WRITING/2026.04.02/1 min read
教育数据里的"脏"到底脏在哪
不是缺值和乱码,是同一个字段在三个学校里意思不一样。
(示例文章,正文占位。)
做教育数据清洗的人都知道缺值和乱码,但真正花时间的从来不是它们。真正花时间的是:三个学校都有一个叫「班级」的字段,一个存的是行政班,一个存的是教学班,第三个存的是选课组。
字段名一样,语义不一样,合在一起之后所有按班级的统计都是错的,而且错得很安静。
不是缺值和乱码,是同一个字段在三个学校里意思不一样。
(示例文章,正文占位。)
做教育数据清洗的人都知道缺值和乱码,但真正花时间的从来不是它们。真正花时间的是:三个学校都有一个叫「班级」的字段,一个存的是行政班,一个存的是教学班,第三个存的是选课组。
字段名一样,语义不一样,合在一起之后所有按班级的统计都是错的,而且错得很安静。