CVS、INI、json、序列化與反序列化總結(jié)

CVS  

CVS 是一個(gè)被分割符，列分割符劃分成行和列的文本文件。

CVS 不指定字符編碼，行分割符為\r\n，最后一行可以沒有換行符，列分割符常為逗號(hào)或者制表符

每一行成為一條記錄record,字段可以使用雙引號(hào)括起來，也可以不使用。如果字段中剛出現(xiàn)了雙引號(hào)、逗號(hào)、換行符必須使用雙引號(hào)括起來。如果字段的值是雙引號(hào)，使用兩個(gè)雙引號(hào)表示一個(gè)轉(zhuǎn)義表頭可選，和字段列對(duì)齊就行了。

CSV 模塊

reader(csvfile,dialect = 'excel',**fmtpararms)

返回reader對(duì)象，是一個(gè)行迭代器。

默認(rèn)使用excel方言，如下：

delimiter 列分割符，逗號(hào)

lineterminator 行分分割符\r\n

quatechar 字段的引用符號(hào)，缺省為“雙引號(hào)

雙引號(hào)的處理

doublequote雙引號(hào)的處理，默認(rèn)為Ture.如果碰到數(shù)據(jù)中有雙引號(hào)，而quotechar也是雙引號(hào)，Ture則使用2個(gè)雙引號(hào)表示，F(xiàn)alse表示使用轉(zhuǎn)義字符將作為雙引號(hào)前綴

escapechar一個(gè)轉(zhuǎn)義字符，默認(rèn)為None

wrirter = csv.writer(f,doublequote=False,escapechar= '@')遇到雙引號(hào)，則必須提供轉(zhuǎn)義字符

quoting指定雙引號(hào)的規(guī)則

QUOTE_ALL所有字段

QUOTE_MONMAL特殊字符字段，Excel方言使用該規(guī)則

QUOTE_NONNIMERIC非數(shù)字字段

QUOTE_NONE 都不使用引號(hào)

writer(csvfile,dialect = 'excel',**fmtpararms)

返回DictWriter的實(shí)例

主要方法有writerow、writerows

ini文件處理

作為配置文件，ini文件格式很流行。

configparser

configpartser模塊的ConfigParser類就是用來操作。

可以將section當(dāng)做key,section存儲(chǔ)的鍵值對(duì)組成的字典，而可以把ini配置文件當(dāng)做一個(gè)嵌套的字典，默認(rèn)使用的是有序字典

read(filenames,encoding= None)

讀取ini文件，可以是單個(gè)文件，也可以是文件列表，可以指定文件編碼。

sections()返回sections列表，缺省section不包括在內(nèi)

add_section(section_name)增加一個(gè)section

has_section(section_name)判斷section是否存在

option(section)返回section的所有option,會(huì)追加缺省section的option

hash_option(section,option)判斷section是否存在這個(gè)option

get(section,option,*,raw=Flase,vars=None[,fallback])

從指定的段的選項(xiàng)上取值，如果找到返回，如果沒有找到就去找DEFAULT段有沒有

getint(section,option,*,raw=False,vars=None[,fallback])

getfloat(section,option,*,raw=False,vars=None[,fallback])

getboolean(section,option,*,raw=False,vars=None[,fallback])

上面3個(gè)方法和get一樣，返回指定類型數(shù)據(jù)

items（raw=False,vars=None)

items(section,raw=False,vars=None)

沒有section,則返回所有section名字及對(duì)象，如果指定section，則返回指定的section的鍵值對(duì)組成二元組

set(section,option,value)

section 存在的情況下，寫入option =value，要求option,value必須是字符串

remove_section(section)

移除section下的option

wrirte(fileobject,space-around_delimiters=Ture)

將當(dāng)前config所有內(nèi)容寫入fileobject中，一般open函數(shù)使用w模式。

Json

Json(JavaScript Object Notation,JS對(duì)象標(biāo)記）是一種輕量級(jí)的數(shù)據(jù)交換格式。它基于ECMAScript的一個(gè)子集，采用完全獨(dú)立于編程語言的文本格式來存儲(chǔ)和表示數(shù)據(jù)

Json的數(shù)據(jù)類型

值

雙引號(hào)引起來的字符串，數(shù)值，true和false,null，對(duì)象，數(shù)組，這些都是值

字符串

由雙引號(hào)包圍起來的任意字符的組合，可以轉(zhuǎn)義字符。

數(shù)值

有正負(fù)，有整數(shù)，浮點(diǎn)數(shù)

對(duì)象

無序的鍵值對(duì)的集合

格式{key1:value1,.......keyn,valuen}

key必須是一個(gè)字符串，需要雙引號(hào)包圍這個(gè)字符

value可以是任意合法的值

數(shù)組

有序的值的集合

格式：[val1,....valn]

序列化與反序列化

定義：

serialization 序列化

將內(nèi)存中對(duì)象存儲(chǔ)下來，把它變成一個(gè)個(gè)字節(jié)----->二進(jìn)制

deserialization 反序列化

將文件的一個(gè)個(gè)字節(jié)恢復(fù)成內(nèi)存中對(duì)象<-----二進(jìn)制

序列化保持到文件就是持久化

可以將數(shù)據(jù)序列化后持久化，或者網(wǎng)絡(luò)傳輸，也可以將從文件中或者網(wǎng)絡(luò)接受到的字節(jié)序列反序列化

Python提供了pickle庫

pickle庫

python中的序列化、福安序列化模塊

dumps 對(duì)象序列化為bytes對(duì)象

dump 對(duì)象序列化到文件對(duì)象，就是存入文件

loads 從bytes對(duì)象反序列化

load 對(duì)象反序列化，從文件讀取數(shù)據(jù)

序列化應(yīng)用：

一般來說，本地序列化的情況較少。大多數(shù)場(chǎng)景都應(yīng)用在網(wǎng)絡(luò)傳輸中。

將數(shù)據(jù)序列化后通過網(wǎng)絡(luò)傳輸?shù)竭h(yuǎn)程節(jié)點(diǎn)，遠(yuǎn)程服務(wù)器上的服務(wù)將接收到的數(shù)據(jù)反序列化后，就可以使用了。但要注意一點(diǎn)，遠(yuǎn)程接收端，反序列化是必須有對(duì)應(yīng)的數(shù)據(jù)類型，否則就會(huì)報(bào)錯(cuò)

，尤其是自定義類，必須遠(yuǎn)程得有一致的定義。python程序之間可以使用pickle解決序列化、反序列化，如果跨平臺(tái)，跨語言，跨協(xié)議pickle就不太合適了。就需要公共的協(xié)議，例如：XML、JSON、protocol Buffer等