Skip to main content
 首页 » 编程设计

python之如何将数据框导出到谷歌云存储桶中的 csv

2024年11月24日8TianFang

我正在尝试将 pandas 数据帧导出到我的谷歌云存储上存储桶中的 csv 文件,但以下代码显然对我不起作用:

my_df.to_csv(StringIO(file_io.FileIO('gs://mybucket/data/file.csv', mode='w+'))) 

这应该如何重写?我收到以下错误:

unbound method write() must be called within FileIO instance as first argument (got nothing instead) 

如果答案显而易见,我深表歉意,但我才刚刚开始学习 Python。

请您参考如下方法:

当我这样编码时,将文件从 gcloud 导入到 dataframe 是可行的:

from tensorflow.python.lib.io import file_io 
from pandas.compat import StringIO 
import pandas as pd 
 
def read_data(gcs_path): 
   file_stream = file_io.FileIO(gcs_path, mode='r') 
   data = pd.read_csv(StringIO(file_stream.read()), names=['various', 'column', 'names']) 
   return data 
 
my_df = read_data('gs://mybucket/data/file.csv') 

但我无法逆转这个过程。

GCS 对我有用,但是:

import google.cloud.storage as gcs 
 
client = gcs.Client() 
bucket = client.bucket('my-bucket') 
blobs = list(bucket.list_blobs(prefix='data/')) 
 
my_df.to_csv('tmp.csv') 
local_tmp_path = ('tmp.csv') 
target_blob = bucket.blob('data/file.csv') 
target_blob.upload_from_file(open(local_tmp_path, 'r'))