淡定雪糕

文章
5
资源
0
加入时间
2年10月24天

python读取超大csv

《python读取超大csv》  现在工作中遇到的数据动辄千万或上亿的数据,其中图像数据是以 oss 链接的形式放入到 csv 中,csv文件所占磁盘空间一般就会20G起,所以直接读入内存是不现实的,这里记录一种使用 pandas 读取超大 csv 文件的方法。Key Words:pandas、迭代器、超大csv Beijing, 2021作者:mxsurui Agile Pioneer  import pandas as pd预览 csv 内容# 导入部分数据进行测试.

分析ArrayList在遍历时修改报错的原因

以前使用for(:){}遍历List集合并同时修改List集合中的内容时会报:ConcurrentModificationException错误,这个错误就是提示我们:方法中有对象的并发修改,但不允许这种修改时,所以抛出此异常。1.模拟遍历集合的同时修改集合(一)新建一个list集合,并给该集合依次添加1-5的字符窜,然后遍历集合,在遍历集合的时候删除”2” public static