管理外部资源的背景

  • 在编程中会面临的一个常见问题是如何正确管理外部资源,例如文件、锁和网络连接
  • 有时,程序会永远保留这些资源,即使不再需要它们,这种现象称为内存泄漏
  • 因为每次创建和打开给定资源的新实例而不关闭现有资源时,可用内存都会减少

如何正确管理资源

  • 正确管理资源通常是一个棘手的问题
  • 它需要一个设置阶段和一个清理阶段
  • 后一个阶段需要执行一些清理操作,例如关闭文件、释放锁或关闭网络连接
  • 如果忘记执行这些清理操作,那么应用程序将使资源保持活动状态,这可能会损害宝贵的系统资源,例如内存和网络带宽

数据库连接数问题

  • 最常见的数据库连接数问题
  • 使用数据库时,可能会出现程序不断创建新连接而不释放或重用它们
  • 在这种情况下,数据库后端可以停止接受新连接
  • 这可能需要管理员登录并手动终止那些陈旧的连接以使数据库再次可用

写入文件问题

  • 将文本写入文件通常是一种缓冲操作
  • 这意味着对文件调用 .write() 不会立即导致将文本写入物理文件,而是写入临时缓冲区
  • 有时,当缓冲区未满而开发人员忘记调用 .close() 时,部分数据可能会永远丢失

with 的作用

常规说法

  • with 语句适用于对资源进行访问的场合,确保不管使用过程中是否发生异常都会执行必要的“清理”操作,释放资源
  • 比如文件使用后自动关闭/线程中锁的自动获取和释放等。

官方解释

  • 仅适用于执行上下文管理器定义的方法的代码块
  • 允许对普通的 try...except...finally  使用模式进行封装以方便地重用

一句话总结

使用 with as 语句操作上下文管理器(context manager),它能够帮助我们自动分配并且释放资源

什么是上下文管理器

详细教程

with as 的基本语法

with 表达式 [as target]:
代码块

执行顺序

  1. 调用表达式以获取上下文管理器
  2. 存储上下文管理器的 .__enter__() 和 .__exit__() 方法供以后使用
  3. 在上下文管理器上调用 .__enter__() 并将其返回值绑定到 target(如果有的话)
  4. 执行 with 代码块
  5. 当 with 代码块完成时,在上下文管理器上调用 .__exit__()

访问文件的代码演进

最基础的写法

# 1、打开文件
file = open("1.txt") # 2、读取文件
data = file.read() # 3、手动关闭文件
file.close()  

存在的问题

在第二步假设文件读取的时候发生异常,没有做任何处理,就不会执行第三步,导致程序可能会泄露文件描述符

使用 try...except...finally 优化

try:
# 打开文件、读取文件
f = open('xxx')
data = f.read()
except Exception as e:
# 捕获异常
pass
finally:
# 关闭文件
f.close()
  • 无论是否抛出异常,最后还是会关闭文件,解决上面提到的问题
  • 但新的问题在于,代码比较冗余,而且要手动关闭文件

使用 with 优化

with open("1.txt") as file:
data = file.read()
  • 作用和 try 写法一样
  • 优势:代码简洁,自动关闭文件,释放资源
  • with 代码块执行完后,会自动调用文件对象的 .close() 方法

支持多个上下文管理器

with open("input.txt") as in_file, open("output.txt", "w") as out_file:
# 从 input.txt 读取内容
# 转换内容
# 将转换后的内容写入output.txt
pass

等价写法

with open("input.txt") as in_file:
with open("output.txt", "w") as out_file:
pass

使用 pathlib.Path.open()

import pathlib

file_path = pathlib.Path("a.txt")
with file_path.open("w") as file:
file.write("Hello, World!")
  • 由于 pathlib 提供了一种优雅、直接和 Pythonic 的方式来操作文件系统路径
  • 因此应该考虑在 with 语句中使用 Path.open() 作为 Python 中的最佳实践

捕获异常的栗子

无论何时加载外部文件的程序都应检查可能存在的问题,例如文件丢失、读写访问等

import pathlib
import logging file_path = pathlib.Path("a.txt")
try:
with file_path.open("w") as file:
file.write("Hello, World!")
except OSError as error:
logging.error("Writing to file %s failed due to: %s", file_path, error)
  • 在 with as 外层添加 try ... except 用于捕获异常
  • 如果在执行 with 期间发生 OSError,则使用日志记录错误信息

遍历目录的栗子

import os

with os.scandir(".") as entries:
for entry in entries:
print(entry.name, "->", entry.stat().st_size, "bytes")
  • scandir() 会返回一个支持上下文管理协议的迭代器
  • .__exit__() 将调用 scandir.close() 关闭迭代器并释放获取的资源

输出结果

__init__.py -> 178 bytes
a.txt -> 13 bytes
1_上下文管理器.py -> 2168 bytes

高精度计算

Python - with 语句的更多相关文章

  1. Python —条件语句

    条件语句 Python条件语句是通过一条或多条语句的执行结果(True或者False)来决定执行的代码块. 可以通过下图来简单了解条件语句的执行过程: Python程序语言指定任何非0和非空(null ...

  2. Python pass 语句使用示例

    Python pass 语句的使用方法示例.Python pass是空语句,pass语句什么也不做,一般作为占位符或者创建占位程序,是为了保持程序结构的完整性,pass语句不会执行任何操作,比如: P ...

  3. Python学习教程(learning Python)--1.2.1 Python输出语句print基本使用

    Python提供很多的内建(built-in)函数,使用者可以不用自己写代码就可以完成一个功能很强大的程序, 在Python里使用最多的(也许是)print函数主要用于用户输出信息. 基本用法:pri ...

  4. Python 条件语句

    Python条件语句是通过一条或多条语句的执行结果(True或者False)来决定执行的代码块. Python程序语言指定任何非0和非空(null)值为true,0 或者 null为false. Py ...

  5. python 循环语句 函数 模块

    python循环语句 while循环语法结构 当需要语句不断的重复执行时,可以使用while循环 while expression: while_suite 语句ehile_suite会被连续不断的循 ...

  6. jmeter数据库,charles抓包,Python循环语句

    jmeter数据库,charles抓包,Python循环语句 一.Jemeter数据库 添加jar包数据库 jemeter=>浏览 添加JDBC Connection Configuration ...

  7. Python import语句导入模块语法[转]

    Python import语句导入模块语法 社区推荐:掘金是国内最活跃的技术社区,我们每日有优质Python开发实例分享,海量python开源库推送.来掘金,和更多懂技术的小伙伴交流.   pytho ...

  8. python 基本语句

    python 基本语句 在使用python的变量前必须给它赋值,因为python变量没有默认值. 获取用户输入值 此时需要注意:input函数的返回值为文本或字符串. 一些简单的函数 乘方 绝对值 将 ...

  9. Python循环语句之break与continue的用法

    摘自原文章: http://www.jb51.net/article/73383.htm Python break 语句Python break语句,就像在C语言中,打破了最小封闭for或while循 ...

  10. python循环语句详细讲解

    想必大家都知道python循环语句吧,可以python循环语句有多种,比如for循环.while循环.if.else等等,   我们可以通过设置条件表达式永远不为 false 来实现无限循环,实例如下 ...

随机推荐

  1. vs2019编写c++的静态链接库并自己使用

    参考网址:https://blog.csdn.net/flame333/article/details/108346305 静态链接库1.新建一个静态库项目,其中有两个头文件,两个源文件 其中比较重要 ...

  2. C#如何调用DOS命令

    在使用C#编辑过程中,通常需要利用外部命令来执行一些操作,从而完成特定的功能.下面小编就以利用C#调用DOS命令"Ver"显示系统版本号为例,给初学C#语言的网友讲解一下具体的调用 ...

  3. MySQL临时表与内存表

    在MySQL中有三种虚拟表:临时表.内存表.视图.下面简单介绍一下临时表和内存表的使用. 1.临时表 MySQL临时表在我们需要保存一些临时数据时是非常有用的.临时表在MySQL 3.23版本中添加. ...

  4. 【mysql】索引优化分析

    1. 索引的概念 1.1 索引是什么 MySQL 官方对索引的定义为:索引(Index)是帮助MySQL 高效获取数据的数据结构.可以得到索引的本质:索引是数据结构.可以简单理解为排好序的快速查找数据 ...

  5. 如何使用Git建立本地仓库并上传代码到GitHub

    使用Git建立本地仓库并上传代码到GitHub 工具/原料   电脑安装git客户端.注册github账号并登陆 方法/步骤     到本地项目文件夹右键选择git bash here   输入个人信 ...

  6. 深入浅出Mybatis系列(九)---缓存

    MyBatis系统中默认定义了两级缓存:一级缓存和二级缓存. 1.默认情况下,只有一级缓存(SqlSession级别的缓存,也称为本地缓存)开启. 2.二级缓存需要手动开启和配置,他是基于namesp ...

  7. 今天突发奇想写了一个小工具,CSDN文章目录生成器

    Why 文章被遗忘 文章检索不好用 方便总结个人知识 What 根据文章分类生成文章目录 莫逸风文章目录 项目地址 gitee(地址)

  8. jQuery中的事件(八):on()、off()、bind()、unbind()、one()、hover()、hide()、show()、offset()等

    <!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN"> <html> <hea ...

  9. BeanUtils实现对象拷贝(三)

    package beanutil; import java.lang.reflect.InvocationTargetException; import java.util.Date; import ...

  10. Linux centos 安装 tomcat 7

    一.tomcat 下载 1.官网下载 如下图点击第1个步骤,第2个步骤右键复制链接地址 # 到linux 下执行下载命令 wget http://mirrors.shu.edu.cn/apache/t ...