python3大數(shù)據(jù)文件的讀取方法

發(fā)布時(shí)間：2020-07-02 13:59:40 來源：億速云閱讀：355 作者：清晨欄目：編程語言

這篇文章主要介紹python3大數(shù)據(jù)文件的讀取方法，文中示例代碼介紹的非常詳細(xì)，具有一定的參考價(jià)值，感興趣的小伙伴們一定要看完！

python中讀取大文件的方法：

1、利用yield生成器讀取

def readPart(filePath, size=1024, encoding="utf-8"):
    with open(filePath,"r",encoding=encoding) as f:
        while True:
            part = f.read(size)  
            if part:
                yield part
            else:
                return None
filePath = r"filePath"
size = 2048 # 每次讀取指定大小的內(nèi)容到內(nèi)存
encoding = 'utf-8'
for part in readPart(filePath,size,encoding):
    print(part)
    # Processing data

2、利用open()自帶方法生成迭代對象，這個(gè)是一行一行的讀取

with open(filePath) as f:
    for line in f:
        print(line)
        # Processing data

以上是python3大數(shù)據(jù)文件的讀取方法的所有內(nèi)容，感謝各位的閱讀！希望分享的內(nèi)容對大家有幫助，更多相關(guān)知識，歡迎關(guān)注億速云行業(yè)資訊頻道！

向AI問一下細(xì)節(jié)

python3大數(shù)據(jù)文件的讀取方法

猜你喜歡

最新資訊

相關(guān)推薦

相關(guān)標(biāo)簽