Python全能神器 - with open as f

一、文件基本读写

在Python中，使用with open as f语句可以打开指定文件，并加以处理。例如，下面的示例用with open as f语句打开test.txt文件，对其中的内容进行读写操作：

with open('text.txt', 'w', encoding='utf-8') as f:
    f.write('hello world')
    f.write('\n')
    f.write('你好，世界')
    
with open('text.txt', 'r', encoding='utf-8') as f:
    data = f.read()
    print(data)

代码的执行结果为：

hello world
你好，世界

在with语句块中，可以将文件作为一个对象，并进行下一步操作。with语句块结束后，文件会自动关闭。

二、读取大文件

对于较大的文件，Python默认一次性读取整个文件内容到内存中，这会导致程序出现内存溢出错误。为了解决这个问题，我们可以采用with open as f语句来逐行读取大文件。下面是一个将大文件拆成小块的示例：

with open('big_data.txt', 'r') as f:
    while True:
        block = f.readline()
        if not block:
            break
        process(block)

使用while循环和readline()方法逐行读取文件内容，在读取到文件结尾时，break语句退出循环。process函数可以实现针对性的对每一行数据进行处理，这样大文件就可以被分块读取并逐步进行后续操作。

三、上下文管理器

with语句块中的对象需要支持上下文管理器协议，该协议需要实现__enter__()和__exit__()两个方法。在调用with语句块时，会自动调用__enter__()方法，而在with语句块执行完毕后，会自动调用__exit__()方法。上下文管理器会负责文件的打开和关闭等操作，应用程序可以在with语句块中专注于对文件进行读写操作。

下面是一个自定义上下文管理器的示例：

class MyContextManager:
    def __init__(self):
        print('Init')
        
    def __enter__(self):
        print('Enter')
        
    def __exit__(self, exc_type, exc_value, traceback):
        print('Exit')
        
with MyContextManager() as f:
    print('In With')

执行该代码的输出结果为：

Init
Enter
In With
Exit

在这个示例中，MyContextManager类实现了上下文管理器协议，并在打开和关闭文件时通过__enter__()和__exit__()方法进行操作。在with语句块内创建了MyContextManager对象，并自动调用__enter__()方法，可以在with块内进行其他操作。with块执行完毕时会自动调用__exit__()方法进行收尾处理。

四、读取二进制文件

有时候需要读取二进制文件，Python内置的二进制文件读写方法需要注意二进制文件的字节序。可以使用with open as f语句打开二进制文件，并使用bytearray()、bytes.fromhex()等方法将二进制数据转换为十六进制或二进制字符串，以方便处理。

with open('binary_file.bin', 'rb') as f:
    data = f.read()
    hex_data = bytearray(data).hex()
    binary_data = bytes.fromhex(hex_data)
    print(hex_data)
    print(binary_data)

在with语句块中，使用读二进制文件的方法rb，将data读入内存后，使用bytearray()方法将data转换为十六进制格式，再使用bytes.fromhex()方法将十六进制字符串转换为二进制数据，并输出相应结果。这样就可以方便地进行二进制数据读取和转换。

五、批量处理文件

有时候需要对批量文件进行操作，可以使用os模块中的相关函数进行批量处理，并使用with open as f语句打开文件逐个进行读写操作。

import os

path = './file_folder/'
file_list = os.listdir(path)

for file_name in file_list:
    full_file_name = os.path.join(path, file_name)
    with open(full_file_name, 'r') as f:
        data = f.read()
        print(data)

这段代码获取指定目录下的所有文件名，逐个用with open as f语句打开文件并读取内容。这样就可以轻松对批量文件进行操作，使得代码更加简洁明了。

结语

本文对Python中用于文件读写的with open as f语句进行了多方面的详细介绍，从基本的文件读写、读取大文件、上下文管理器、读取二进制文件、批量处理文件等多个方面讲解了with open as f语句的用法和特点。在实际应用中，可以根据情况选择并结合各种方法，灵活高效地进行文件操作。