如何读写文本文件和二进制文件?

答案是文本文件以字符形式存储并依赖编码解析,二进制文件直接存储原始字节。读写时需区分模式(如’r’与’rb’),使用with语句管理资源,避免内存溢出需分块或逐行处理大文件,并注意编码、权限及模式错误。

如何读写文本文件和二进制文件?

读写文本文件和二进制文件,核心在于理解它们的数据存储方式和对应的操作模式。简单来说,文本文件处理的是字符,而二进制文件处理的是原始字节流。在编程中,这通常通过指定文件打开模式(如

'r'

用于文本读取,

'rb'

用于二进制读取)来区分,并使用相应的方法(如文本的

read()

会返回字符串,二进制的

read()

会返回字节串)进行操作。

解决方案

在我看来,掌握文件读写,最关键的是理解

open()

函数及其模式参数,以及

with

语句的妙用。这不仅能让代码更简洁,还能有效避免资源泄露。

读写文本文件

文本文件,顾名思义,是人类可读的字符序列。当我们打开一个文本文件时,系统会根据指定的编码(比如UTF-8)将字节流转换为字符。

读取文本文件:通常,我们会用

'r'

模式打开文件进行读取。如果文件编码不是系统默认的,最好明确指定

encoding

参数。

try:    with open('my_text_file.txt', 'r', encoding='utf-8') as f:        content = f.read() # 读取整个文件内容为一个字符串        print("文件全部内容:n", content)        # 也可以逐行读取,尤其适合大文件        f.seek(0) # 将文件指针移回开头        print("n逐行读取:")        for line in f:            print(line.strip()) # strip() 去除每行末尾的换行符except FileNotFoundError:    print("文件 'my_text_file.txt' 未找到。")except UnicodeDecodeError:    print("解码错误,请检查文件编码是否为UTF-8。")

写入文本文件:写入文本文件通常使用

'w'

模式(写入,会覆盖原有内容)或

'a'

模式(追加,在文件末尾添加内容)。

# 写入模式 ('w') - 如果文件存在则清空,不存在则创建with open('output.txt', 'w', encoding='utf-8') as f:    f.write("这是第一行文本。n")    f.write("这是第二行,我正在写入一些新内容。n")    print("内容已写入 output.txt (覆盖模式)。")# 追加模式 ('a') - 在文件末尾添加内容with open('output.txt', 'a', encoding='utf-8') as f:    f.write("这是追加的第三行。n")    f.write("再加一行,看看效果。n")    print("内容已追加到 output.txt。")

读写二进制文件

二进制文件则不同,它不关心字符编码,直接操作原始字节数据。这对于处理图片、音频、视频、可执行文件等非文本数据至关重要。

读取二进制文件:使用

'rb'

模式。读取到的内容将是

bytes

对象。

try:    with open('my_image.jpg', 'rb') as f:        binary_data = f.read() # 读取整个文件内容为一个bytes对象        print(f"读取到 {len(binary_data)} 字节的二进制数据。")        # print(binary_data[:50]) # 打印前50个字节,看看是什么样子except FileNotFoundError:    print("文件 'my_image.jpg' 未找到。")

这里我通常会用一个实际存在的图片文件来测试,比如从网上随便下载一张小图。

写入二进制文件:使用

'wb'

模式。写入的内容必须是

bytes

对象。

# 假设我们有一些字节数据data_to_write = b'x48x65x6cx6cx6fx20x42x69x6ex61x72x79x21' # "Hello Binary!" 的ASCII字节表示data_to_write += b'x00x01x02x03x04x05' # 额外的一些字节with open('binary_output.bin', 'wb') as f:    f.write(data_to_write)    print("二进制数据已写入 binary_output.bin。")# 也可以将一个图片的字节数据写入另一个文件# with open('my_image.jpg', 'rb') as src:#     img_data = src.read()# with open('copied_image.jpg', 'wb') as dest:#     dest.write(img_data)# print("图片已复制。")

文本文件和二进制文件,究竟有何本质区别

在我看来,它们最根本的区别在于“解释”的方式。文本文件是面向字符的,它假设文件内容是由特定编码(如UTF-8, GBK)的字符组成的。当我们读取文本文件时,操作系统编程语言会根据这个编码规则,将底层的字节序列“翻译”成我们能理解的字符。如果编码不对,就会出现乱码。比如,

'你好'

在UTF-8下可能是一串字节

b'xe4xbdxa0xe5xa5xbd'

,但在GBK下可能是另一串字节。文本编辑器就是基于这种“翻译”来展示内容的。

而二进制文件则是面向字节的,它不进行任何字符编码的转换。文件中的每一个字节都被视为独立的原始数据。程序读取二进制文件时,得到的就是一串未经解释的字节序列(通常是

bytes

对象),至于这些字节代表什么,完全取决于应用程序如何去“构造”和“理解”它们。一个字节可能代表一个像素的颜色值,也可能代表一个整数的一部分,或者一个指令码。这种直接操作字节的方式,使得二进制文件可以存储任何类型的数据,但代价是失去了人类的直接可读性。你用文本编辑器打开一个图片文件,看到的只会是乱码,因为文本编辑器试图用字符编码去解释那些本来不代表字符的字节。

处理大文件时,有哪些高效的读写策略?

处理大文件时,最核心的原则是“不要一次性将整个文件读入内存”。内存是有限的,如果文件太大,很容易导致程序崩溃。我通常会采用以下几种策略:

逐行读取(文本文件): 这是最常用也最简单的策略。Python的

for line in f:

结构就是为此而生。它会在每次迭代时读取一行,而不是一次性读取所有行。这对于日志文件、CSV文件等非常有效。

# 示例:处理一个巨大的日志文件def process_large_log(filepath):    processed_count = 0    with open(filepath, 'r', encoding='utf-8') as f:        for line_num, line in enumerate(f, 1):            # 假设我们只关心包含 "ERROR" 的行            if "ERROR" in line:                print(f"在第 {line_num} 行发现错误: {line.strip()}")                processed_count += 1            # 模拟一些耗时操作            # time.sleep(0.001)    print(f"总共处理了 {processed_count} 条错误记录。")# process_large_log('large_log.txt')

分块读取(二进制文件或非结构化文本文件): 对于二进制文件,或者那些不以行为单位分割的文本文件(例如大型JSON或XML,虽然它们通常有专门的解析库),我们可以指定每次读取固定大小的块。

# 示例:分块读取一个大二进制文件def copy_large_binary(source_path, dest_path, chunk_size=4096): # 4KB    with open(source_path, 'rb') as src, open(dest_path, 'wb') as dest:        while True:            chunk = src.read(chunk_size)            if not chunk: # 读取到文件末尾                break            dest.write(chunk)    print(f"文件从 {source_path} 复制到 {dest_path} 完成。")# copy_large_binary('very_large_video.mp4', 'copied_video.mp4')

这种方式可以有效地控制内存使用,特别适合文件复制、哈希计算等场景。

使用

mmap

模块(内存映射文件): 在某些操作系统上,可以使用

mmap

模块将文件的一部分或全部映射到进程的虚拟内存空间。这使得文件操作看起来就像操作内存中的字节数组一样,可以随机访问文件中的任何位置,而无需将整个文件加载到物理内存。操作系统会负责按需加载文件页。这对于需要频繁随机读写大文件的场景非常有用,但它有其平台依赖性和复杂性。

import mmapimport os# 假设有一个大文件 'data.bin'# with open('data.bin', 'wb') as f:#     f.write(os.urandom(1024 * 1024 * 100)) # 写入100MB随机数据try:    with open('data.bin', 'r+b') as f: # r+b 读写二进制模式        # mmap.ACCESS_READ 表示只读映射        # mmap.ACCESS_WRITE 表示可写映射,但修改不会同步到磁盘        # mmap.ACCESS_COPY 表示私有拷贝,修改不会影响原文件        mm = mmap.mmap(f.fileno(), 0, access=mmap.ACCESS_READ)        # 现在可以像操作字节串一样操作mm        print(f"文件大小: {len(mm)} 字节")        print(f"前10个字节: {mm[:10]}")        print(f"从第100000个字节开始的5个字节: {mm[100000:100005]}")        mm.close()except FileNotFoundError:    print("文件 'data.bin' 未找到,请先创建一个大文件。")except Exception as e:    print(f"mmap操作出错: {e}")
mmap

虽然强大,但使用时需要更小心,特别是涉及到跨平台兼容性和同步问题。

文件操作中常见的错误和陷阱有哪些,如何避免?

在我的经验中,文件操作虽然看似简单,但稍不留神就会掉进坑里。以下是一些常见的错误和我的应对之道:

忘记关闭文件句柄(或资源泄露):这是最常见也最危险的错误。如果打开文件后忘记

f.close()

,尤其是在循环或异常处理中,会导致文件句柄耗尽、文件锁定、数据丢失等问题。

避免方法: 始终使用

with open(...) as f:

语句。

with

语句会确保文件在代码块执行完毕后(无论是否发生异常)自动关闭,极大简化了资源管理。我的所有代码示例都体现了这一点。

FileNotFoundError

:文件不存在当尝试打开一个不存在的文件进行读取时,会抛出此错误。

避免方法: 在尝试读取前,可以使用

os.path.exists(filepath)

来检查文件是否存在。或者,更推荐的方式是使用

try-except FileNotFoundError

块来优雅地处理这种情况,给用户友好的提示。

PermissionError

:权限不足当程序尝试在没有足够权限的目录下创建、写入或读取文件时,会发生此错误。例如,尝试写入C盘根目录或

/root

目录。

避免方法: 确保程序运行的用户拥有目标文件或目录的相应权限。在生产环境中,不要使用root或管理员权限运行不必要的程序。在开发时,注意文件路径的选择。

UnicodeDecodeError

/

UnicodeEncodeError

:编码问题这是处理文本文件时最让人头疼的问题。当读取一个文件时,如果指定的

encoding

与文件的实际编码不符,或者写入时,字符串中包含无法用指定编码表示的字符,就会出现这些错误。

避免方法:读取时: 尽可能明确指定

encoding='utf-8'

,因为UTF-8是目前最通用的编码。如果仍报错,可以尝试

encoding='gbk'

或其他常见编码。如果实在不确定,可以尝试

errors='ignore'

errors='replace'

(但这会丢失数据,不推荐用于关键数据)。更好的做法是,尝试使用

chardet

等库来猜测文件编码,但它并非100%准确。写入时: 同样明确指定

encoding='utf-8'

。确保要写入的字符串只包含该编码支持的字符。

模式选择错误:例如,用

'r'

模式打开文件后尝试写入,或者用

'w'

模式打开后期望保留原有内容。

避免方法: 仔细检查

open()

函数的模式参数:

'r'

:只读(默认)。

'w'

:只写,如果文件存在则覆盖,不存在则创建。

'a'

:追加,如果文件存在则在末尾写入,不存在则创建。

'x'

:独占创建,如果文件已存在则会报错。

'r+'

:读写,文件必须存在。

'w+'

:读写,如果文件存在则覆盖,不存在则创建。

'a+'

:读写,在文件末尾追加。二进制模式则在上述模式后加上

'b'

,如

'rb'

,

'wb'

,

'r+b'

缓冲区(Buffering)问题:写入文件时,数据通常不会立即写入磁盘,而是先存储在内存缓冲区中。这提高了I/O效率,但也意味着程序崩溃时,缓冲区中的数据可能丢失。

避免方法:使用

f.flush()

强制将缓冲区内容写入磁盘。使用

os.fsync(f.fileno())

(更强力的同步,确保数据写入物理存储)。当然,

with open(...)

会在文件关闭时自动

flush

,所以大部分情况下无需手动处理。但在需要高度数据一致性的场景(如数据库事务日志),可能需要考虑手动刷新。

总之,文件操作需要细心,多用

try-except

处理潜在错误,并始终记住

with

语句是你的好朋友。

以上就是如何读写文本文件和二进制文件?的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1369748.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
如何使用asyncio进行异步编程?
上一篇 2025年12月14日 09:56:01
如何实现Python的内存管理?
下一篇 2025年12月14日 09:56:13

相关推荐

  • composer require-dev和require有什么不同_Composer Require与Require-Dev区别解析

    require用于声明项目运行必需的依赖,如框架、数据库组件和第三方SDK,这些包会随项目部署到生产环境;2. require-dev用于声明仅在开发和测试阶段需要的工具,如PHPUnit、PHPStan、Faker等,不会默认部署到生产环境;3. 安装时composer install根据环境决定…

    2026年5月10日
    1000
  • 修复Django电商项目中AJAX过滤产品列表图片不显示问题

    在Django电商项目中,当使用AJAX动态加载过滤后的产品列表时,常遇到图片无法正常显示的问题。这通常是由于前端模板中图片加载方式(如data-setbg属性结合JavaScript库)与AJAX动态内容更新机制不兼容所致。解决方案是直接在AJAX返回的HTML中使用标准的标签来渲染图片,确保浏览…

    2026年5月10日
    000
  • 开源免费PHP工具 PHP开发效率提升利器

    推荐开源免费PHP开发工具以提升效率:VS Code、Sublime Text轻量高效,PhpStorm专业强大;调试用Xdebug、Kint、Ray;依赖管理选Composer;代码质量工具包括PHPStan、Psalm、PHP_CodeSniffer;数据库管理可用%ignore_a_1%MyA…

    2026年5月10日
    000
  • Matplotlib 地图中多类型图例的创建与优化

    Matplotlib 地图中多类型图例的创建与优化Matplotlib 地图中多类型图例的创建与优化Matplotlib 地图中多类型图例的创建与优化Matplotlib 地图中多类型图例的创建与优化

    本教程旨在解决matplotlib地图可视化中,如何在一个图例中同时展示颜色块(如区域分类)和自定义标记(如特定兴趣点)的问题。文章详细介绍了当传统`patch`对象无法正确显示标记时,如何利用`matplotlib.lines.line2d`创建标记图例句柄,并将其与颜色块图例句柄合并,从而生成一…

    2026年5月10日 用户投稿
    300
  • Golang JSON序列化:控制敏感字段暴露的最佳实践

    本教程探讨golang中如何高效控制结构体字段在json序列化时的可见性。当需要将包含敏感信息的结构体数组转换为json响应时,通过利用`encoding/json`包提供的结构体标签,特别是`json:”-“`,可以轻松实现对特定字段的忽略,从而避免敏感数据泄露,确保api…

    2026年5月10日
    000
  • 利用海象运算符简化条件赋值:Python教程与最佳实践

    本文旨在探讨Python中海象运算符(:=)在条件赋值场景下的应用。通过对比传统if/else语句与海象运算符,以及条件表达式,分析海象运算符在简化代码、提高可读性方面的优势与局限性。并通过具体示例,展示如何在列表推导式等场景下合理使用海象运算符,同时强调其潜在的复杂性及替代方案,帮助开发者更好地掌…

    2026年5月10日
    100
  • 比特币新手教程 比特币交易平台有哪些

    比特币是一种去中心化的数字货币,基于区块链技术实现点对点交易,具有匿名性、有限发行和不可篡改等特点;新手可通过交易所购买,P2P交易获得比特币,常用平台包括Binance、OKX和Huobi;交易流程包括注册账户、实名认证、绑定支付方式、充值法币并下单购买,可选择市价单或限价单;比特币存储方式有交易…

    2026年5月10日
    000
  • RichHandler与Rich Progress集成:解决显示冲突的教程

    在使用rich库的`richhandler`进行日志输出并同时使用`progress`组件时,可能会遇到显示错乱或溢出问题。这通常是由于为`richhandler`和`progress`分别创建了独立的`console`实例导致的。解决方案是确保日志处理器和进度条组件共享同一个`console`实例…

    2026年5月10日
    000
  • 修复点击时按钮抖动:CSS垂直对齐实践

    本文探讨了在Web开发中,交互式按钮(如播放/暂停按钮)在点击时发生意外垂直位移的问题。通过分析CSS样式变化对元素布局的影响,我们发现这是由于按钮不同状态下的边框样式和内边距改变,以及默认的垂直对齐行为共同作用所致。核心解决方案是利用CSS的vertical-align属性,将其设置为middle…

    2026年5月10日
    100
  • 使用 Jupyter Notebook 进行探索性数据分析

    Jupyter Notebook通过单元格实现代码与Markdown结合,支持数据导入(pandas)、清洗(fillna)、探索(matplotlib/seaborn可视化)、统计分析(describe/corr)和特征工程,便于记录与分享分析过程。 Jupyter Notebook 是进行探索性…

    2026年5月10日
    000
  • php常量怎么用_PHP常量(define/const)定义与使用方法

    PHP中可通过define函数和const关键字定义常量,用于存储不可变值。define适用于全局作用域,支持动态名称和条件定义,如define(‘SITE_NAME’, ‘MyWebsite’);const在编译时生效,语法简洁但限制多,只能在类或全…

    2026年5月10日
    000
  • 前端缓存策略与JavaScript存储管理

    根据数据特性选择合适的存储方式并制定清晰的读写与清理逻辑,能显著提升前端性能;合理运用Cookie、localStorage、sessionStorage、IndexedDB及Cache API,结合缓存策略与定期清理机制,可在保证用户体验的同时避免安全与性能隐患。 前端缓存和JavaScript存…

    2026年5月10日
    200
  • HTML5网页如何实现手势操作 HTML5网页移动端交互的处理技巧

    首先利用原生touch事件实现滑动判断,再通过preventDefault解决滚动冲突,接着引入Hammer.js处理复杂手势,最后通过优化点击区域、避免事件冲突和增加视觉反馈提升体验。 在移动端浏览器中,HTML5网页可以通过触摸事件实现手势操作,提升用户体验。虽然原生JavaScript提供了基…

    2026年5月10日
    000
  • 深入理解 Express.js 中 next() 参数的作用与中间件机制

    本文深入探讨 express.js 中间件函数中的 `next()` 参数。它负责将控制权传递给请求-响应周期中的下一个中间件或路由处理程序。文章将详细解释 `next()` 的工作原理、中间件的注册与执行顺序,以及不正确使用 `next()` 可能导致请求挂起的风险,并通过代码示例和实际应用场景,…

    2026年5月10日
    000
  • Python命令怎样使用profile分析脚本性能 Python命令性能分析的基础教程

    使用Python的cProfile模块分析脚本性能最直接的方式是通过命令行执行python -m cProfile your_script.py,它会输出每个函数的调用次数、总耗时、累积耗时等关键指标,帮助定位性能瓶颈;为进一步分析,可将结果保存为文件python -m cProfile -o ou…

    2026年5月10日
    000
  • 如何插入查询结果数据_SQL插入Select查询结果方法

    如何插入查询结果数据_SQL插入Select查询结果方法如何插入查询结果数据_SQL插入Select查询结果方法如何插入查询结果数据_SQL插入Select查询结果方法如何插入查询结果数据_SQL插入Select查询结果方法

    使用INSERT INTO…SELECT语句可高效插入数据,通过NOT EXISTS、LEFT JOIN、MERGE语句或唯一约束避免重复;表结构不一致时可通过别名、类型转换、默认值或计算字段处理;结合存储过程可提升可维护性,支持参数化与动态SQL。 将查询结果数据插入到另一个表中,可以…

    2026年5月10日 用户投稿
    300
  • Python递归函数追踪与性能考量:以序列打印为例

    本文深入探讨了Python中一种递归打印序列元素的方法,并着重演示了如何通过引入缩进参数来有效追踪递归函数的执行流程和参数变化。通过实际代码示例,文章揭示了递归调用可能带来的潜在性能开销,特别是对调用栈空间的需求,以及Python默认递归深度限制可能导致的错误,为读者提供了理解和优化递归算法的实用见…

    2026年5月10日
    000
  • python中zip函数详解 python多序列压缩zip函数应用场景

    zip函数的应用场景包括:1) 同时遍历多个序列,2) 合并多个列表的数据,3) 数据分析和科学计算中的元素运算,4) 处理csv文件,5) 性能优化。zip函数是一个强大的工具,能够简化代码并提高处理多个序列时的效率。 在Python中,zip函数是一个非常有用的工具,它能够将多个可迭代对象打包成…

    2026年5月10日
    000
  • JavaScript 动态菜单点击高亮效果实现教程

    本教程详细介绍了如何使用 JavaScript 实现动态菜单的点击高亮功能。通过事件委托和状态管理,当用户点击菜单项时,被点击项会高亮显示(绿色),同时其他菜单项恢复默认样式(白色)。这种方法避免了不必要的DOM操作,提高了性能和代码可维护性,确保了无论点击方向如何,功能都能稳定运行。 动态菜单高亮…

    2026年5月10日
    200
  • Python中怎样使用pymongo?

    在python中使用pymongo可以轻松地与mongodb数据库进行交互。1)安装pymongo:pip install pymongo。2)连接到mongodb:from pymongo import mongoclient; client = mongoclient(‘mongod…

    2026年5月10日
    000

发表回复

登录后才能评论
关注微信