如何用pandas向一個csv文件追加寫入數(shù)據(jù)

發(fā)布時間：2020-08-01 09:55:32 來源：億速云閱讀：1279 作者：小豬欄目：開發(fā)技術(shù)

這篇文章主要為大家展示了如何用pandas向一個csv文件追加寫入數(shù)據(jù)，內(nèi)容簡而易懂，希望大家可以學(xué)習(xí)一下，學(xué)習(xí)完之后肯定會有收獲的，下面讓小編帶大家一起來看看吧。

我們越來越多的使用pandas進(jìn)行數(shù)據(jù)處理，有時需要向一個已經(jīng)存在的csv文件寫入數(shù)據(jù)，傳統(tǒng)的方法之前我也有些過，向txt，excel文件寫入數(shù)據(jù)，傳送門：Python將二維列表（list）的數(shù)據(jù)輸出（TXT，Excel）

pandas to_csv()只能在新文件寫數(shù)據(jù)？當(dāng)然不是！

pandas to_csv() 是可以向已經(jīng)存在的具有相同結(jié)構(gòu)的csv文件增加dataframe數(shù)據(jù)。

df.to_csv('my_csv.csv', mode='a', header=False)

to_csv()方法mode默認(rèn)為w，我們加上mode='a'，便可以追加寫入數(shù)據(jù)。

pandas讀寫文件，處理數(shù)據(jù)的效率太高了，所以我們盡量使用pandas的進(jìn)行輸出。

下面讓我們來看一下示例

# -*- coding:utf-8 -*-
import os
import time
import pandas as pd
 
from multiprocessing import Pool
 
def merge(filename):
  return pd.read_csv('./fun_data/'+filename)
 
if __name__ == "__main__":
  file_list = os.listdir('./fun_data')
  e1 = time.time()
 
  pool = Pool(20)
  result = pool.map(merge,file_list)
  pool.close()
  pool.join()
 
  e2 = time.time()
  print(e2 - e1)
 
  for i in result:
    i.to_csv('./static.csv',mode='a',encoding='utf-8',header=False,index=False)
  e3 = time.time()
  print(e3-e2)

以上就是關(guān)于如何用pandas向一個csv文件追加寫入數(shù)據(jù)的內(nèi)容，如果你們有學(xué)習(xí)到知識或者技能，可以把它分享出去讓更多的人看到。

向AI問一下細(xì)節(jié)

如何用pandas向一個csv文件追加寫入數(shù)據(jù)

猜你喜歡

最新資訊

相關(guān)推薦

相關(guān)標(biāo)簽