Pandas df.iloc/df.loc 等方法在大型数据集上采用for 循环读取数据速度慢_pandas loc查询数据太慢

作者：花生_TL007 | 2024-03-08 12:51:30

踩

pandas loc查询数据太慢

项目场景：

提示：这里简述项目相关背景：

对有超过200w条数据的dataframe中数据进行预处理

工具：python 3.10.9, Jupyter notebook

提示：这里描述项目中遇到的问题：

for循环速度极慢，10分钟未见报错/结果

代码形如：

for i in range(len(df)):
	l = []
    l.append(df.iloc[i][0])```
1
2
3

pandas.iloc方法速度慢，这一点在数据量小的情况下难以在不监测的情况下体现，但是在数据量较大时会出现耗时过长

将data frame 转换成字典

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/花生_TL007/article/detail/210202