0
点赞
收藏
分享

微信扫一扫

# yyds干货盘点 # 盘点一个dataframe读取csv文件失败的问题

大家好,我是皮皮。

一、前言

前几天在Python钻石群【心田有垢生荒草】问了一个Pandas数据处理的问题,一起来看看吧。

大佬们 求教个方法  现在有个数据量很大的dataframe  要吐csv格式  但结果总是串行  加了encoding='utf-8'还是没解决  还有其他方法么?

# yyds干货盘点 # 盘点一个dataframe读取csv文件失败的问题_Pandas

下图是他提供的图片:

# yyds干货盘点 # 盘点一个dataframe读取csv文件失败的问题_数据_02

二、实现过程

这里【提请问粘给图截报错贴代源码】大佬给了一个答案,串行应该是分隔符的问题,csv默认是以逗号,隔开,直接清洗分隔符即可。

后来粉丝自己给出了自己的尝试结果,如下:

quotechar做设置不太好用  

直接把换行符改了会报个错  need to escape, but no escapechar set  还得指定下escapechar
python
import re
df['字段名'] = df['字段名'].apply(lambda x: re.sub('\n',' ',x))
df.to_csv('data.csv', escapechar='\\')

这样可以

后来【巭孬嫑勥烎】也给了一个思路,如下图所示:

# yyds干货盘点 # 盘点一个dataframe读取csv文件失败的问题_Python基础_03

方法还是很多的。

三、总结

大家好,我是皮皮。这篇文章主要盘点了一个Pandas数据处理问题,文中针对该问题,给出了具体的解析和代码实现,帮助粉丝顺利解决了问题。

最后感谢粉丝【心田有垢生荒草】提问,感谢【提请问粘给图截报错贴代源码】、【巭孬嫑勥烎】给出的思路和代码解析,感谢【莫生气】等人参与学习交流。

【提问补充】温馨提示,大家在群里提问的时候。可以注意下面几点:如果涉及到大文件数据,可以数据脱敏后,发点demo数据来(小文件的意思),然后贴点代码(可以复制的那种),记得发报错截图(截全)。代码不多的话,直接发代码文字即可,代码超过50行这样的话,发个.py文件就行。

# yyds干货盘点 # 盘点一个dataframe读取csv文件失败的问题_数据处理_04

举报

相关推荐

0 条评论