Skip to main content
 首页 » 编程设计

python之如何根据设定条件转发填充 Pandas 数据框中的非空值

2024年11月01日9unruledboy

假设我有以下数据框:

df = pd.DataFrame({'a':[0,0,0,1,0,0], 'b':[0,0,1,0,0,0], 'c':[0,1,1,0,0,0]}) 
df.index = pd.date_range('2000-03-02', periods=6, freq='D') 

看起来像这样:

            a  b  c 
2000-03-02  0  0  0 
2000-03-03  0  0  1 
2000-03-04  0  1  1 
2000-03-05  1  0  0 
2000-03-06  0  0  0 
2000-03-07  0  0  0 

现在我想将给定列中出现在最后一个 1 之后的每个值设置为 2。所需的结果如下所示:

            a  b  c 
2000-03-02  0  0  0 
2000-03-03  0  0  1 
2000-03-04  0  1  1 
2000-03-05  2  2  2 
2000-03-06  2  2  2 
2000-03-07  2  2  2 

我有这段代码,它可以工作:

cols = df.columns 
for col in cols: 
    s = df[col] 
    x = s[s==1].index[-1] 
    df[col][(x + 1):] = 2 

但这似乎很尴尬,并且与 pandas(非 Pandonic?)的精神背道而驰。对更好的方法有什么建议吗?

请您参考如下方法:

一种方法是replace NaN 的低零:

In [11]: df.replace(0, np.nan).bfill()  # maybe neater way to do this? 
Out[11]: 
             a   b   c 
2000-03-02   1   1   1 
2000-03-03   1   1   1 
2000-03-04   1   1   1 
2000-03-05   1 NaN NaN 
2000-03-06 NaN NaN NaN 
2000-03-07 NaN NaN NaN 

现在您可以使用 where将这些更改为 2:

In [12]: df.where(df.replace(0, np.nan).bfill(), 2) 
Out[12]: 
            a  b  c 
2000-03-02  0  0  0 
2000-03-03  0  0  1 
2000-03-04  0  1  1 
2000-03-05  1  2  2 
2000-03-06  2  2  2 
2000-03-07  2  2  2 

编辑:在这里使用 cumsum 的技巧可能会更快:

In [21]: %timeit df.where(df.replace(0, np.nan).bfill(), 2) 
100 loops, best of 3: 2.34 ms per loop 
 
In [22]: %timeit df.where(df[::-1].cumsum()[::-1], 2) 
1000 loops, best of 3: 1.7 ms per loop 
 
In [23]: %timeit pd.DataFrame(np.where(np.cumsum(df.values[::-1], 0)[::-1], df.values, 2), df.index) 
10000 loops, best of 3: 186 µs per loop