我正在使用chunksize加载〜24GB的csv文件
reader = pd.read_csv(in_file,chunksize=10000) for chunk in reader: chunk.dropna(inplace=True) ...
我正在运行的问题是csv文件仍然具有空值.任何想法可能是什么?
reader = pd.read_csv(in_file,chunksize=10000) for chunk in reader: chunk = chunk.dropna() ...
感谢您的帮助@kabanus和@ user32185.我还使用了dask来帮助调整文件大小.