Skip to main content
 首页 » 编程设计

python之U-SQL Python 扩展 DataFrame 列格式

2025年02月15日8cmt

我正在尝试使用 Python 扩展来运行一些代码,但是当我尝试引用 pandas 数据框中的列时,它说找不到该列:

if "hist_future_flag" not in [x.lower() for x in dfBLData.columns.values.tolist()]: 
            ProcessSuccessFlag = False 
            print('dfBLData (Input DataFrame) requires "hist_future_flag" column. Cols in dfBLData are: ') 
            print(', '.join(dfBLData.columns.values.tolist())) 

dfBLData (Input DataFrame) requires ""hist_future_flag"" column. Cols in dfBLData are: b'geography', b'mitm_key', b'target', b'dow', b'time_key', b'hist_future_flag' ... [and so on]

所以看起来它们是以字节形式传入的,但是当我尝试转换 header 时,python 说它们是字符串并且无法解码!

这是我正在运行的相关 U-SQL:

@d =  
SELECT [geography], [mitm_key], [target], [dow], [time_key],[hist_future_flag] 
FROM modeling.dbo.LandingZone 
WHERE geography == 5; 
 
@bl = 
REDUCE @d 
ON geography, mitm_key 
PRODUCE  
time_key DateTime, 
predict float, 
hist_future_flag int 
USING new Extension.Python.Reducer(pyScript:@myScript); 
 
OUTPUT @bl 
TO "/test_reducer.csv" 
USING Outputters.Csv(outputHeader: true); 

请您参考如下方法:

我们在 2017 年 4 月 13 日部署了新位,我们进行了更改以不将字符串转换为字节。请重新安装扩展并重试。