离群值的判断和处理.pdf

1 离群值的判断和处理 上海市临床检验中心张健 2 主要内容  离群值判断和处理的相关国家标准  离群值的定义  离群值的判断  离群值的处理 GB/T 4883 作者：于振凡 3 离群值判断和处理的相关国家标准  GBT 4883-2008 数据的统计处理和解释正态样本离群值的 判断和处理  GBT 6380-2008 数据的统计处理和解释 Ⅰ型极值分布样本 离群值的判断和处理  GBT 8056-2008 数据的统计处理和解释指数分布样本离群 值的判断和处理 4 GBT4833 离群值的定义 离群值outlier  样本中的一个或几个观测值，它们离开其他 观测值较远，暗示它们可能来自不同的总体。 注：离群值按显著性的程度分为歧离值和统 计离群值。 统计离群值statistical outlier  在检出水平下统计检验为显著的离群值 5 检出水平与剔除水平 检出水平：detection level  为检出离群值而指定的统计检验的显著性水平  注：除非根据本标准达成协议的各方另有约定，检出水平应为 0.05 剔除水平：deletion level  为检出离群值是否高度离群而指定的统计检验的显著性水平  注：除非根据本标准达成协议的各方另有约定，检出水平应为 0.01 GB/T 4883 6 离群值的来源与判定 按产生原因可分为两类：  总体固有变异的极端表现  由试验条件和方法的偶然偏离产生 离群值判定的方法：  根据技术上或物理上的理由直接判定  应用统计方法判定－GBT4833 7 离群值的三种情形  GBT4833在下面三种情况下判断离群值  上侧情形：根据实际情况和以往经验，离群值都是高端值  下侧情形：根据实际情况和以往经验，离群值都是低端值  双侧情形：根据实际情况和以往经验，离群值可以是高端 值，也可以是低端值 8 单个和多个离群值  检出离群值个数的上限：应规定检出离群值的个数，当超 过这个限制时，对样本应做慎重处理。  单个离群值情形： 1.依据实际或经验，确定事宜的离群值检验方法 2. 确定显著水平 3. 确定检验临界值 4. 计算相应统计量值，与临界值比较做出判断  多个离群值情形：离群值大于1的情况，重复单个离群值 方法，当超出上限时，检验停止。 9 离群值处理  处理方式：  保留离群值并用于后续数据处