Skip to main content
 首页 » 编程设计

python之python中去除异常值的函数

2024年12月31日8落叶无声

我正在尝试编写一个函数来更新 dataset 中所有列中 interquartile 范围内的所有异常值。当我将一个列作为输入传递时它正在工作,但是如果我添加另一个循环来遍历所有列它就不起作用了。

df2ColumnNames=df2.columns 
 
def fixoutliers(x): 
 
for i in df2ColumnNames: 
    print("colnames ",i) 
    xy=x[i]     
    print(xy) 
    updated=[] 
    Q1,Q3=np.percentile(xy,[25,75]) 
    IQR=Q3-Q1 
    #print(IQR) 
    minimum=Q1-1.5*IQR 
    maximum=Q3+1.5*IQR 
    print("maximum",maximum) 
    for i in xy: 
        if(i>maximum): 
            i=maximum 
            updated.append(i) 
        elif(i<minimum): 
            i=minimum 
            updated.append(i) 
        else: 
            print("In else") 
            updated.append(i) 
    return updated 

请您参考如下方法:

感谢大家的建议。经过一番努力,我设法创建了我想要的功能。如果对某人有帮助,请发布解决方案

#####定义一个函数,它接受一个可以输入的数据框(x) 包含数字列和分类列######

def fixoutliers(x):

##Get all the column name from the input dataframe x 
xColumnNames=x.columns 
print(xColumnNames) 
#for j in df2ColumnNames: 
 
for j in xColumnNames: 
    try: 
        print("colnames ",j) 
        xy=x[j]     
        mydata=pd.DataFrame() 
        #print(xy) 
        updated=[] 
        Q1,Q3=np.percentile(xy,[25,75]) 
        IQR=Q3-Q1 
        minimum=Q1-1.5*IQR 
        maximum=Q3+1.5*IQR 
        for i in xy: 
            if(i>maximum): 
                print("Entering maxim") 
                i=maximum 
                updated.append(i) 
            elif(i<minimum): 
                print("enterinf minimum") 
                i=minimum 
                updated.append(i) 
            else: 
                updated.append(i) 
        x[j]=updated 
    except: 
        continue 
return x