Skip to main content
 首页 » 编程设计

python之Pandas 中是否有 "Identity"过滤器

2024年12月31日7飞鱼

我有一个函数接受一些复杂的参数,并期望返回一个用于 pandas 数据框的过滤器。

filters = build_filters(df, ...) 
filtered_df = df[filters] 

例如,如果数据框有 Gender 和 Age 系列,build_filters 可以返回 (df.Gender == 'M ') & (df.Age == 100)

但是,如果 build_filters 确定不应该应用过滤器,是否有任何我可以返回的东西(即“身份过滤器”)会导致 df 没有被过滤?

我已经尝试了一些显而易见的事情,例如 None、True,甚至是每次调用 都会返回 True 的生成器下一步()

我最接近的是

operator.ne(df.ix[:,0], nan) 

我认为这很愚蠢,并且可能会导致我无法预见的错误。

请您参考如下方法:

您可以返回 slice(None)。这是一个简单的演示:

df = pd.DataFrame([[1, 2, 3]]) 
 
df2 = df[slice(None)]  # equivalent to df2 = df[:] 
df2[0] = -1 
 
assert df.equals(df2) 

或者,使用 pd.DataFrame.pipe如果不需要应用过滤器,则返回 df:

def apply_filters(df): 
    # some logic 
    if not filter_flag: 
        return df 
    else: 
        # mask = .... 
        return df[mask] 
 
filtered_df = df.pipe(apply_filters)