python-如果将chsv分块加载,pandas dropna()将不起作用

python-如果将chsv分块加载,pandas dropna()将不起作用,第1张

概述我正在使用chunksize加载〜24GB的csv文件reader = pd.read_csv(in_file, chunksize=10000) for chunk in reader: chunk.dropna(inplace=True) ... 我正在运行的问题是csv文件仍然具有空值.任何想法可能是什么?最佳答案我最终要做的是rea

我正在使用chunksize加载〜24GB的csv文件

reader = pd.read_csv(in_file,chunksize=10000)for chunk in reader:    chunk.dropna(inplace=True)    ...

我正在运行的问题是csv文件仍然具有空值.任何想法可能是什么?最佳答案我最终要做的是

reader = pd.read_csv(in_file,chunksize=10000)for chunk in reader:    chunk = chunk.dropna()    ...

感谢您的帮助@kabanus和@ user32185.我还使用了dask来帮助调整文件大小. 总结

以上是内存溢出为你收集整理的python-如果将chsv分块加载,pandas dropna()将不起作用 全部内容,希望文章能够帮你解决python-如果将chsv分块加载,pandas dropna()将不起作用 所遇到的程序开发问题。

如果觉得内存溢出网站内容还不错,欢迎将内存溢出网站推荐给程序员好友。

欢迎分享,转载请注明来源:内存溢出

原文地址: https://www.outofmemory.cn/langs/1199559.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-06-04
下一篇 2022-06-04

发表评论

登录后才能评论

评论列表(0条)

保存