1. 传感器数据异常值清洗
数据工程师背景
传感器每秒上传温度数据,但偶尔会出现因干扰产生的极高或极低异常值,影响后续分析。
问题
需要快速剔除超出正常物理范围的异常数据,并保持数据流的连续性。
如何使用
上传传感器 CSV 数据,选择“标准差”方法设定上下界,并使用“裁剪”策略。
minMethod: stddev, maxMethod: stddev, lowerStdDev: 3, upperStdDev: 3, handlingStrategy: clip结果
所有超出均值 3 倍标准差的温度数据被自动裁剪至边界值,消除了异常波动。