能够通过两种办法利用python读取大文件:第一种是利用yield生成器读取;第二种是:利用open()自带办法生成迭代对象,这个是一行一行的读取。

1、利用yield生成器读取

def readPart(filePath, size=1024, encoding="utf-8"):    with open(filePath,"r",encoding=encoding) as f:        while True:            part = f.read(size)              if part:                yield part            else:                return NonefilePath = r"filePath"size = 2048 # 每次读取指定大小的内容到内存encoding = 'utf-8'for part in readPart(filePath,size,encoding):    print(part)    # Processing data

2、利用open()自带办法生成迭代对象,这个是一行一行的读取

with open(filePath) as f:    for line in f:        print(line)        # Processing data

python读取文件相干操作文档欢送查看:

python如何读取文件的数据

更多Python常识能够关注segmentfault自学网