Skip to main content
 首页 » 编程设计

python之当数据文件只有一行时,numpy genfromtxt collapse recarray

2025年05月04日11mengfanrong

我正在使用 genfromtxt 函数从 csv 文件中读取数据。

data = np.genfromtxt(file_name, dtype=np.dtype(input_vars), delimiter=",") 

然后我可以访问数组列,例如:

data["My column name"] 

然后返回一个一维向量。只有当源文件只有一个数据行时,数组才会折叠 - 它的 shape==() 以及 data["My column name"] 返回的向量不是一个向量,而只是一个值,一些后续函数失败,因为它们需要一个向量。

我需要的是让它始终是一个向量。换句话说,我需要 genfromtxt 不会折叠数组的维数,即使数据文件只有一行。

换句话说,如果源数据文件有两行,则data.shape==(2,)。但是如果源数据文件只有一行,data.shape==() 但我需要它是(1,)。然后,如果我是正确的,data["My column name"] 将返回一个向量(尽管只有一个元素)并且后续函数不会失败。

怎么做? data.reshape((1,)) 和 np.atleast_1d(data) 出于某种奇怪的原因对我不起作用,不知道为什么......

更新:

我举了一个简单的例子来说明我的问题。

假设我有两个文件:

mydata1.csv,一行:

1,2,3 

和有两行的 mydata2.csv:

1,2,3 
4,5,6 

这是代码片段(评论中描述的问题):

import numpy as np 
dt = [("A", "<i4"), ("B", "<i4"), ("C", "<i4")] 
data2 = np.genfromtxt("mydata2.csv", dtype=dt, delimiter=",") 
print(data2.shape)  # returns (2,) 
data1 = np.genfromtxt("mydata1.csv", dtype=dt, delimiter=",") 
print(data1.shape)  # returns () but I need it to return (1,) 
 
data2["A"]  # returns a 1D vector with two values 
data1["A"]  # returns a value (zero dimensional) bt I need a 1D vector with one value 

我能想到的所有变通办法都太丑陋了,会导致过多的代码重构。理想情况下,作为 genfromtxt 的结果,我需要始终拥有一维重排。

请您参考如下方法:

当您在 csv 文件中只有一行时,您正在获取 data 作为 np.void 对象。您可以使用强制 data 成为 np.ndarray 做:

data = np.atleast_1d(data)