能够通过两种办法利用python读取大文件:第一种是利用yield生成器读取;第二种是:利用open()自带办法生成迭代对象,这个是一行一行的读取。
1、利用yield生成器读取
def readPart(filePath, size=1024, encoding="utf-8"): with open(filePath,"r",encoding=encoding) as f: while True: part = f.read(size) if part: yield part else: return NonefilePath = r"filePath"size = 2048 # 每次读取指定大小的内容到内存encoding = 'utf-8'for part in readPart(filePath,size,encoding): print(part) # Processing data
2、利用open()自带办法生成迭代对象,这个是一行一行的读取
with open(filePath) as f: for line in f: print(line) # Processing data
python读取文件相干操作文档欢送查看:
python如何读取文件的数据
更多Python常识能够关注segmentfault自学网