Skip to main content
 首页 » 编程设计

python之按行对 Pandas 列选择执行 scipy.stats 测试时出现 ValueError

2025年02月15日9www_RR

目标是在存储 KS D 统计值 df['ks'] 的 pandas 列中创建一个新列。 KS 统计数据是在该数据帧的两组列之间生成的,grp1 和 grp2:

# sample dataframe 
import pandas as pd 
import numpy as np 
 
dic = {'gene': ['x','y','z','n'], 
        'cell_a': [1, 5, 8,9], 
        'cell_b': [8, 5, 4,9], 
        'cell_c': [8, 6, 1,1], 
        'cell_d': [1, 2, 7,1], 
        'cell_e': [5, 7, 9,1], 
       } 
df = pd.DataFrame(dic) 
df.set_index('gene', inplace=True) 
df['ks'] = np.nan 
 
# sample groups 
grp1 = ['cell_a','cell_b'] 
grp2 = ['cell_d','cell_e'] 

所以基因 x 的 D 统计量将是 stats.ks_2samp([1,5], [1,6])[0],基因 y 将是 stats.ks_2samp ([5,2], [1,7])[0] 等尝试如下:

# attempt 1 to fill in KS stat 
for idx, row in df.iterrows(): 
    df.ix[idx, 'ks'] = stats.ks_2samp(df[grp1], df[grp2])[0] 

但是,当我尝试填充 ks 系列时,出现以下错误:

ValueError: object too deep for desired array 

我的问题分为两部分:1) 对象“对于数组而言太深”是什么意思,以及 2) 我如何在不迭代的情况下完成同样的事情?

请您参考如下方法:

循环中的 KS 计算出现“太深”错误,因为我需要为每个分布传递一个一维数组以进行测试:

for idx, row in df.iterrows(): 
    df.loc[idx, 'ks'] = stats.ks_2samp(df.loc[idx, grp1], (df.loc[idx, grp2]))[0] 

我之前的尝试使用了二维数组。这就是导致它“太深”的原因