目录| 上一节(1.5 列表) | 下一节 (1.7 函数)

1.6 文件管理

大多数的程序需要从某处读取输入。本节讨论文件访问。

文件输入和输出

打开一个文件:

f = open('foo.txt', 'rt')     # Open for reading (text)
g = open('bar.txt', 'wt') # Open for writing (text)

读取所有的数据:

data = f.read()

# Read only up to 'maxbytes' bytes
data = f.read([maxbytes])

写入一些文本:

g.write('some text')

当你完成操作后,关闭文件:

f.close()
g.close()

文件应该被正确的关闭,这是很容易忘记的一个步骤。因此,首选方法是像下面这样使用 with 语句:

with open(filename, 'rt') as file:
# Use the file `file`
...
# No need to close explicitly
...statements

当控制流离开缩进的代码块时,这将会自动关闭文件。

读取文件数据的习惯用法

以字符串的形式一次性读取整个文件:

with open('foo.txt', 'rt') as file:
data = file.read()
# `data` is a string with all the text in `foo.txt`

通过迭代逐行读取文件:

with open(filename, 'rt') as file:
for line in file:
# Process the line

写入文件的习惯用法

写入字符串数据:

with open('outfile', 'wt') as out:
out.write('Hello World\n')
...

重定向 print() 函数:

with open('outfile', 'wt') as out:
print('Hello World', file=out)
...

练习

本练习依赖于 Data/portfolio.csv 文件。该文件由一行一行的关于股票投资组合的信息构成。假定你是在 practical-python/Work/ 目录下进行操作。如果你不确定自己所在的目录,你可以通过执行以下操作找出 Python 运行的目录:

>>> import os
>>> os.getcwd()
'/Users/beazley/Desktop/practical-python/Work' # Output vary
>>>

练习 1.26: 文件预览

首先,尝试以字符串的形式一次性读取整个文件:

>>> with open('Data/portfolio.csv', 'rt') as f:
data = f.read() >>> data
'name,shares,price\n"AA",100,32.20\n"IBM",50,91.10\n"CAT",150,83.44\n"MSFT",200,51.23\n"GE",95,40.37\n"MSFT",50,65.10\n"IBM",100,70.44\n'
>>> print(data)
name,shares,price
"AA",100,32.20
"IBM",50,91.10
"CAT",150,83.44
"MSFT",200,51.23
"GE",95,40.37
"MSFT",50,65.10
"IBM",100,70.44
>>>

在上面的示例中,应注意 Python 有两种输出模式。在第一种模式下,你在提示符后输入 data,Python 向你展示包含引号和转义码的原始字符串。当你输入 print(data)时,你获得真正的字符串的格式化输出。

一次性读取文件很简单,但这通常不是最恰当的读取文件方式——尤其是当文件碰巧很大或者文件包含要一次性处理的文本行时。

要逐行读取文件,可以像下面这样使用 for 循环:

>>> with open('Data/portfolio.csv', 'rt') as f:
for line in f:
print(line, end='') name,shares,price
"AA",100,32.20
"IBM",50,91.10
...
>>>

当你像上面展示的那样使用此代码时,它会读取文件的每一行,直到到达文件末尾。在文件末尾,循环会停止。

在某些特定的情况下,你可能想要手动的读取或者跳过某一行文本(例如,可能你想跳过列标题的第一行):

>>> f = open('Data/portfolio.csv', 'rt')
>>> headers = next(f)
>>> headers
'name,shares,price\n'
>>> for line in f:
print(line, end='') "AA",100,32.20
"IBM",50,91.10
...
>>> f.close()
>>>

next() 函数返回文件中的下一行文本。如果你反复调用该函数,将会获得连续的行。但是,如你所知,for 循环已经使用 next() 函数获取数据了。所以,通常情况下,除非你像上面展示的那样试图显式跳过或者读取一行,否则,不要直接调用 next() 函数。

一旦读取文件的各行,你就可以开始执行更多的操作,例如拆分。

示例,尝试以下操作:

>>> f = open('Data/portfolio.csv', 'rt')
>>> headers = next(f).split(',')
>>> headers
['name', 'shares', 'price\n']
>>> for line in f:
row = line.split(',')
print(row) ['"AA"', '100', '32.20\n']
['"IBM"', '50', '91.10\n']
...
>>> f.close()

注意:在这些示例中,因为没有使用 with 语句,所以 f.close() 被显式的调用。

练习 1.27: 读取数据文件

现在你已经知道如何读取文件,让我们编写一个程序来执行简单的计算。

portfolio.csv 文件里面的列对应股票的名称,股票的数量以及单支股票持有的购买价格。编写一个名为 pcost.py 的程序来打开这个文件,读取所有的行并且计算在所有的股票投资组合中花费多少钱来购买这些股份。

提示:要将字符串转为整数,使用 int() 函数。要将字符串转为浮点数,使用 float() 函数。

你的程序应该打印如下输出:

Total cost 44671.15

练习 1.28: 其它类型的“文件"

如果你想读取非文本文件(如 gzip 压缩的数据文件)怎么办?虽然内建 open() 函数在这里帮不了你了,但是 Python 提供的 gzip 模块可以读取 gzip 文件。

试试看:

>>> import gzip
>>> with gzip.open('Data/portfolio.csv.gz', 'rt') as f:
for line in f:
print(line, end='') ... look at the output ...
>>>

注意:此处包含 'rt' 文件模式至关重要。如果你忘记使用它,你将会得到字节字符串而不是通常的文本字符串。

说明: 我们不应该为此使用 Pandas 吗?

数据科学家很快指出,诸如 Pandas 这样的库已经具有读取 CSV 文件的函数,为什么不使用 Pandas 呢?的确如此——而且效果也很好。但是,这不是一门有关学习 Pandas 的课程,读取文件是一个比读取 CSV 文件更普遍的问题。我们使用 CSV 文件做例子的主要原因是:它是大多数编码人员熟悉的格式,并且相对易于直接使用——在读取 CSV 文件的过程中,阐明了许多 Python 特性。所以,当你回到工作中,请务必使用 Pandas。但是,在本课程剩下部分,我们将会继续使用标准的 Python 函数。

目录| 上一节(1.5 列表) | 下一节 (1.7 函数)

注:完整翻译见 https://github.com/codists/practical-python-zh

翻译:《实用的Python编程》01_06_Files的更多相关文章

  1. 翻译:《实用的Python编程》InstructorNotes

    实用的 Python 编程--讲师说明 作者:戴维·比兹利(David Beazley) 概述 对于如何使用我的课程"实用的 Python 编程"进行教学的问题,本文档提供一些通用 ...

  2. 翻译:《实用的Python编程》README

    欢迎光临 大约 25 年前,当我第一次学习 Python 时,发现 Python 竟然可以被高效地应用到各种混乱的工作项目上,我立即被震惊了.15 年前,我自己也将这种乐趣教授给别人.教学的结果就是本 ...

  3. 翻译:《实用的Python编程》05_02_Classes_encapsulation

    目录 | 上一节 (5.1 再谈字典) | 下一节 (6 生成器) 5.2 类和封装 创建类时,通常会尝试将类的内部细节进行封装.本节介绍 Python 编程中有关封装的习惯用法(包括私有变量和私有属 ...

  4. 翻译:《实用的Python编程》04_02_Inheritance

    目录 | 上一节 (4.1 类) | 下一节 (4.3 特殊方法) 4.2 继承 继承(inheritance)是编写可扩展程序程序的常用手段.本节对继承的思想(idea)进行探讨. 简介 继承用于特 ...

  5. 翻译:《实用的Python编程》01_02_Hello_world

    目录 | 上一节 (1.1 Python) | 下一节 (1.3 数字) 1.2 第一个程序 本节讨论有关如何创建一个程序.运行解释器和调试的基础知识. 运行 Python Python 程序始终在解 ...

  6. 翻译:《实用的Python编程》03_03_Error_checking

    目录 | 上一节 (3.2 深入函数) | 下一节 (3.4 模块) 3.3 错误检查 虽然前面已经介绍了异常,但本节补充一些有关错误检查和异常处理的其它细节. 程序是如何运行失败的 Python 不 ...

  7. 翻译:《实用的Python编程》03_04_Modules

    目录 | 上一节 (3.3 错误检查) | 下一节 (3.5 主模块) 3.4 模块 本节介绍模块的概念以及如何使用跨多个文件的函数. 模块和导入 任何一个 Python 源文件都是一个模块. # f ...

  8. 翻译:《实用的Python编程》03_05_Main_module

    目录 | 上一节 (3.4 模块) | 下一节 (3.6 设计讨论) 3.5 主模块 本节介绍主程序(主模块)的概念 主函数 在许多编程语言中,存在一个主函数或者主方法的概念. // c / c++ ...

  9. 翻译:《实用的Python编程》04_01_Class

    目录 | 上一节 (3.6 设计讨论) | 下一节 (4.2 继承) 4.1 类 本节介绍 class 语句以及创建新对象的方式. 面向对象编程(OOP) 面向对象编程是一种将代码组织成对象集合的编程 ...

随机推荐

  1. POJ1195 二维线段树

    Mobile phones POJ - 1195 Suppose that the fourth generation mobile phone base stations in the Tamper ...

  2. Codeforces 1220D 思维 数学 二分图基础

    原题链接 题意 我们有一个含多个正整数的集合B,然后我们将所有的整数,也就是Z集合内所有元素,都当做顶点 两个整数 \(i , j\) 能建立无向边,当且仅当 \(|i - j|\) 这个数属于B集合 ...

  3. python学习:随机数的产生,随机数拼接字在脚本中的应用

    学习random的时候,看到一份表格觉得不错,转载记录到自己的笔记中: random以及它们在numpy.random中对应的函数应该会很有帮助: 注意:NumPy专门用于构建和操作大型多维数组.如果 ...

  4. Java 实现Redis客户端,服务端

    Java 实现Redis客户端,服务端 1.Java实现Redis发布订阅 1.1实例 2.[Redis]Java实现redis消息订阅/发布(PubSub) 3.java实现 redis的发布订阅 ...

  5. HttpRunner(1)自我介绍

    前言 首先,我们无论学习哪个框架,都要带着问题,带着思考去学习 思考1:HttpRunner是什么? 思考2:HttpRunner的设计模式是什么? 思考3:为什么我们要学习HttpRunner?他的 ...

  6. Mybatis学习笔记1

    mybatis是一个orm持久化框架,mybatis专注于sql的操作从3.0开始名字改变了:ibatis-mybatis 对象关系映射(Object Relational Mapping) 一.My ...

  7. Luogu4168 蒲公英 (分块)

    题目传送门 题意 长度为n的序列,有m次询问,每次询问求\([l,r]\) 间的众数,如果有多个,输出最小的那个 \(n\le 4\times 10^4,m\le 5\times 10^5,a_i\l ...

  8. Codeforces Round #676 (Div. 2)【ABCD】

    比赛链接:https://codeforces.com/contest/1421 A. XORwice 题意 给出两个正整数 \(a.b\),计算 \((a \oplus x) + (b \oplus ...

  9. 哈希算法解决:HDU1686 && POJ2774 && POJ3261

    HDU1686 题意: 找A串在B串中的出现次数(可重叠),可用KMP做,这里只提供哈希算法做的方法 题解: 先得到A串的hash值,然后在B中枚举起点,长度为lena的子串,检验hash值是否相同就 ...

  10. NYOJ746——整数划分(四)

    描述 暑假来了,hrdv 又要留学校在参加ACM集训了,集训的生活非常Happy(ps:你懂得),可是他最近遇到了一个难题,让他百思不得其解,他非常郁闷..亲爱的你能帮帮他吗? 问题是我们经常见到的整 ...