Skip to main content
 首页 » 编程设计

python之将 Bag.to_textfiles 与 dask 一起使用时,出现错误 "AttributeError: ' dict' object has no attribute 'endswith' "

2025年04月02日14lautakyan007

标题说明了大部分 但有问题的对象是:

>>> import dask.bag as db 
>>> b = db.from_sequence([{'name': 'Alice',   'balance': 100}, 
...                       {'name': 'Bob',     'balance': 200}, 
...                       {'name': 'Charlie', 'balance': 300}], 
...                      npartitions=2) 

但是当我尝试

>>> b.to_textfiles('*.json') 

我明白了

AttributeError: 'dict' object has no attribute 'endswith' 
 
Traceback 
--------- 
  File "/Users/jlatmann/anaconda/envs/python3/lib/python3.5/site-packages/dask/async.py", line 267, in execute_task 
    result = _execute_task(task, data) 
  File "/Users/jlatmann/anaconda/envs/python3/lib/python3.5/site-packages/dask/async.py", line 249, in _execute_task 
    return func(*args2) 
  File "/Users/jlatmann/anaconda/envs/python3/lib/python3.5/site-packages/dask/bag/core.py", line 1025, in write 
    if not (firstline.endswith(os.linesep) or firstline.endswith('\n')): 

任务版本:0.9.0

系统版本

3.5.1 |Anaconda 4.0.0 (x86_64)| (default, Dec 7 2015, 11:24:55) [GCC 4.2.1 (Apple Inc. build 5577)]

感谢观看!

请您参考如下方法:

to_textfiles 函数假定包的元素是字符串。我建议先在你的包上映射 str

b.map(str).to_textfiles('*.json') 

或者更好的是,假设你的输出文件是 json,明确地将你的数据转储为 json 格式

b.map(json.dumps).to_textfiles('*.json')