Skip to main content
 首页 » 编程设计

Python:为什么从CSV文件中获取某列数据的函数只能返回第一次数据

2025年02月15日9mfrbuaa

我正在尝试绘制一个城市全年的天气数据,例如 high_temp_f 和 low_temp_f,数据已存储在 CSV 文件中。我编写了一个函数来获取我需要的列,以便将它们绘制在图表中,但该函数只能返回我第一次使用它时的数据。

CSV文件结构如下:

date,high_temp_f,avg_temp_f,low_temp_f 
2016-04-18,69,58,46 
2016-04-19,59,52,46 
2016-04-20,80,63,46 

我写的代码如下:

import csv 
 
def data_to_list(data_index): 
    """ save data to a list """ 
    results = [] 
    for row in data: 
        results.append(int(row[data_index])) 
    return results 
 
filename = 'city.csv' 
with open(filename) as f_city: 
    data = csv.reader(f_city) 
    header = next(data) 
 
 
    high_temp_f_bj = data_to_list(1) 
    low_temp_f_bj = data_to_list(3) 
 
print(high_temp_f_bj) 
print(low_temp_f_bj) 

输出如下:

[69, 59, 80] 
[] 

我得到了 high_temp_f_bj 的结果,它是 [69, 59, 80],但是对于 low_temp_f_bj,我只有 []。但是,如果我删除 high_temp_f_bj = data_to_list(1) 和 print(high_temp_f_bj) 的代码,我可以获得 low_temp_f_bj 的正确输出,即 [46, 46, 46]。我感到很困惑!为什么我只能使用一次该功能???

请您参考如下方法:

csv.reader 返回 Reader object这是一个迭代器,因此具有您在数据中的位置的状态。

这就是为什么您可以使用 next(data) 读取数据的下(在本例中为第一行)的原因。调用 next() 不仅会为您提供该行,还会提升内部状态,因此下一次调用将为您提供以下行。这就是为什么您不必在 data_to_list 函数中再次跳过标题行。

但是,这也具有您只能浏览文件一次的效果。 next()(或遍历 data,它只是执行后续的 next() 调用)将不断向前移动该内部行指针,直到结束到达文件。但是当到达终点时,您也不能再读一次。

一些基于文件的迭代器允许您寻找回到文件的开头; CSV 阅读器没有(至少据我所知)。所以如果你想多次处理数据,你必须先将解析后的 CSV 数据加载到内存中:

with open(filename) as f_city: 
    data = csv.reader(f_city) 
    header = next(data) 
 
    # create a list from the remaining contents in the iterable 
    data = list(data) 

或者,您应该考虑更改 data_to_list 函数,以便能够一次处理多个列,这样您只需在文件中移动一次,而不必将所有内容存储在内存中。


如果您在理解这个可迭代对象和内部指针时遇到困难,请先尝试使用更简单的迭代器。您可以通过对其调用 iter() 从任何序列中获取一个:

>>> example = [1, 2, 3, 4] 
>>> iterator = iter(example) 
>>> next(iterator) 
1 
>>> next(iterator) 
2 
>>> for x in iterator: 
        print(x) 
 
3 
4 
>>> next(iterator) 
Traceback (most recent call last): 
  File "<pyshell#8>", line 1, in <module> 
    next(iterator) 
StopIteration 

如您所见,在迭代器上调用 next() 会为您提供迭代器中的 next 元素。这些调用会移动内部指针,这就是为什么您不会从多个 next() 调用中获得相同元素的原因。当您使用 for 循环遍历迭代器时,您也只是从迭代器中获取剩余的元素。一旦迭代器耗尽(导致 for 循环结束),随后对 next() 的调用将不会产生任何新结果,而只会引发 StopIteration 异常,这是迭代器耗尽的标志(这也是导致 for 循环结束的原因)。