Python字符串中数字与文字数字的鲁棒提取教程

python字符串中数字与文字数字的鲁棒提取教程

本教程旨在解决从包含混合数字(阿拉伯数字和英文拼写数字)的字符串中提取首尾数字的挑战。文章将深入探讨传统字符串替换方法的局限性,并提供两种主要解决方案:利用Python正则表达式实现精确且能处理重叠匹配的策略,以及介绍 word2number 库在完整数字短语转换中的应用,同时明确其在复杂字符串解析场景下的适用性。通过详细的代码示例,帮助读者构建一个能够准确识别并组合这些数字的鲁棒系统。

1. 理解挑战:数字与文字数字的混合识别

在文本处理中,我们经常需要从字符串中提取数字。然而,当数字以两种形式出现时——即阿拉伯数字(如 1, 2)和英文拼写形式(如 one, two)——问题变得复杂。更具挑战性的是,这些拼写形式的数字可能与其他字符混合,甚至出现重叠,例如在 “eightwothree” 中,我们期望识别出 ‘8’ 和 ‘3’,而在 “xtwone3four” 中,’two’ 和 ‘one’ 紧密相连,需要分别识别为 ‘2’ 和 ‘1’。

示例问题:考虑以下输入字符串及其期望的输出:

two1nine => 29eightwothree => 83abcone2threexyz => 13xtwone3four => 244nineeightseven2 => 42zoneight234 => 147pqrstsixteen => 76

传统字符串替换方法的局限性:初学者可能会尝试使用 str.replace() 方法将所有拼写数字替换为阿拉伯数字。例如:

tmp_string = line.strip()tmp_string = tmp_string.replace("nine", "9")tmp_string = tmp_string.replace("eight", "8")# ...tmp_string = tmp_string.replace("one", "1")

这种方法存在明显缺陷:

顺序问题: 如果替换顺序不当,可能会导致错误。例如,如果先替换 “one”,再替换 “twone” 中的 “two”,那么 “twone” 可能变成 “t2ne”,丢失了 “one”。重叠问题: 对于 “eightwothree” 这样的字符串,如果先将 “eight” 替换为 “8”,得到 “8wothree”,那么 “two” 和 “three” 仍然存在,但 “two” 在 “eight” 之后,”three” 在 “two” 之后,简单的替换无法处理这种重叠或相邻的上下文。更典型的重叠是 “twone”,它包含 “two” 和 “one”。简单的替换通常会破坏其中一个。

为了解决这些问题,我们需要更精细的文本解析策略。

2. 方案一:基于正则表达式的精确匹配

正则表达式(Regex)是处理字符串模式匹配的强大工具。通过巧妙地构造正则表达式,我们可以同时匹配阿拉伯数字和拼写数字,并处理重叠情况。

立即学习“Python免费学习笔记(深入)”;

核心概念:

d: 匹配任何阿拉伯数字(0-9)。|: 逻辑或运算符,允许匹配多个模式中的任意一个。零宽先行断言 (?=…): 这是解决重叠匹配的关键。它允许正则表达式引擎在不消耗字符的情况下进行匹配。例如,(?=(two|one)) 会在找到 “two” 或 “one” 的位置时返回匹配,但光标不会移动到匹配内容的末尾,从而允许后续的匹配从同一位置或紧邻位置开始。

实现步骤:

定义映射关系: 创建一个字典,将拼写数字映射到其对应的阿拉伯数字。构建正则表达式: 结合 d 和所有拼写数字,并使用零宽先行断言 (?=…) 将它们包裹起来。查找所有匹配: 使用 re.findall() 查找字符串中所有符合模式的匹配项。转换并提取首尾: 遍历匹配结果,将拼写数字转换为阿拉伯数字,然后提取转换后的第一个和最后一个数字。

代码示例:extract_calibration_value 函数

import redef extract_calibration_value(line: str) -> int:    """    从字符串中提取第一个和最后一个数字(阿拉伯数字或拼写数字),    并将其组合成一个两位数。    能够处理重叠的拼写数字。    """    # 建立拼写数字到阿拉伯数字的映射    word_to_digit = {        'one': '1', 'two': '2', 'three': '3', 'four': '4',        'five': '5', 'six': '6', 'seven': '7', 'eight': '8', 'nine': '9'    }    # 构建正则表达式模式。    # (?=...) 是一个正向先行断言,它允许匹配重叠的模式。    # 例如,对于 "twone",(?=(d|two|one)) 可以匹配到 "two" 和 "one"。    # 我们捕获实际的匹配内容在第1组中。    pattern = r'(?=(d|one|two|three|four|five|six|seven|eight|nine))'    # 查找所有匹配项,不区分大小写    matches = re.findall(pattern, line.lower())    if not matches:        # 如果没有找到任何数字,根据需求返回0或抛出异常        return 0    # 将匹配到的单词转换为数字    converted_digits = []    for match in matches:        if match.isdigit():            converted_digits.append(match)        else:            converted_digits.append(word_to_digit[match])    # 提取第一个和最后一个转换后的数字    first_digit = int(converted_digits[0])    last_digit = int(converted_digits[-1])    # 组合成两位数    return first_digit * 10 + last_digit# 示例测试test_lines = [    "two1nine",    "eightwothree",    "abcone2threexyz",    "xtwone3four",    "4nineeightseven2",    "zoneight234",    "7pqrstsixteen"]print("--- 正则表达式方案测试 ---")for i, line in enumerate(test_lines):    value = extract_calibration_value(line)    print(f"  Line {i+1}: '{line}' -> {value}")

代码逻辑解释:

word_to_digit 字典提供了快速查找拼写数字对应阿拉伯数字的能力。pattern = r'(?=(d|one|two|three|four|five|six|seven|eight|nine))’ 是核心。d 匹配单个阿拉伯数字。one|two|…|nine 匹配任何一个拼写数字。(…) 创建一个捕获组,使得 re.findall 返回匹配到的具体内容。(?=…) 是一个正向先行断言。它使得模式匹配成功后,正则表达式引擎的当前位置不会向前推进。这意味着即使 “twone” 中的 “two” 被匹配到,引擎仍然可以从 ‘w’ 之后的位置开始寻找下一个匹配,从而找到 “one”。re.findall(pattern, line.lower()) 会返回一个列表,其中包含所有捕获组的匹配内容。例如,对于 “xtwone3four”,它可能返回 [‘two’, ‘one’, ‘3’, ‘four’]。遍历 matches 列表,将拼写数字通过 word_to_digit 字典转换为阿拉伯数字字符串,并将阿拉伯数字直接添加。最终,取 converted_digits 列表的第一个元素和最后一个元素,转换为整数,并组合成最终的两位数。

3. 方案二:使用 word2number 库进行整体转换

虽然上述正则表达式方法是解决特定问题(混合数字的精确提取)的有效方案,但Python生态系统中也存在专门用于将英文数字词语转换为数字的库,例如 word2number。这个库适用于将完整的英文数字短语(如 “eighty three” 或 “one hundred twenty-three”)转换为其数值。

word2number 库介绍:word2number 是一个简洁的库,能够将用英文单词表示的数字转换为整数或浮点数。

安装:

pip install word2number

代码示例:words_to_digits 函数

from word2number import w2ndef words_to_digits(value: str):    """    使用 word2number 库将完整的英文数字短语转换为数值。    """    try:        number = w2n.word_to_num(value)        return number    except ValueError:        return Noneprint("n--- word2number 库示例 ---")# 示例:转换完整的数字短语print(f"'eighty three' -> {words_to_digits('eighty three')}") # 输出: 83print(f"'one hundred twenty-three' -> {words_to_digits('one hundred twenty-three')}") # 输出: 123print(f"'seven' -> {words_to_digits('seven')}") # 输出: 7# 尝试转换非完整数字短语,会失败print(f"'eightwothree' -> {words_to_digits('eightwothree')}") # 输出: None (或抛出异常,取决于具体版本)print(f"'two1nine' -> {words_to_digits('two1nine')}") # 输出: None

重要提示:word2number 在本特定问题中的局限性word2number 库非常适合将 完整的、符合英语语法规则的数字短语 转换为数值。然而,它不适用于解析包含混合文本、部分拼写数字或需要识别重叠模式的任意字符串。例如,对于 eightwothree 或 xtwone3four 这样的输入,word2number 无法直接将其解析为 83 或 24,因为它期望的是一个完整的数字表达,而不是需要从复杂字符串中提取离散数字的场景。

因此,对于本文开头提出的特定问题(即从复杂字符串中提取第一个和最后一个阿拉伯数字或拼写数字),基于正则表达式的方案 (extract_calibration_value) 是更直接和有效的解决方案。word2number 可以作为辅助工具,如果你的任务是先将字符串中的某个子串识别为完整的数字短语,然后再进行转换。

4. 完整解决方案与实践

将上述正则表达式方案整合到一个完整的程序中,使其能够读取文件并处理每一行,计算总和。

import reimport os # 导入os模块用于检查文件是否存在def extract_calibration_value(line: str) -> int:    """    从字符串中提取第一个和最后一个数字(阿拉伯数字或拼写数字),    并将其组合成一个两位数。    能够处理重叠的拼写数字。    """    word_to_digit = {        'one': '1', 'two': '2', 'three': '3', 'four': '4',        'five': '5', 'six': '6', 'seven': '7', 'eight': '8', 'nine': '9'    }    # 构建正则表达式模式,使用正向先行断言 (?=...) 处理重叠匹配    pattern = r'(?=(d|one|two|three|four|five|six|seven|eight|nine))'    matches = re.findall(pattern, line.lower())    if not matches:        return 0 # 如果没有找到任何数字,返回0    converted_digits = []    for match in matches:        if match.isdigit():            converted_digits.append(match)        else:            converted_digits.append(word_to_digit[match])    first_digit = int(converted_digits[0])    last_digit = int(converted_digits[-1])    return first_digit * 10 + last_digitdef main():    # 提示用户输入文件名    nomFichier = input('请输入文件名 (例如: input.txt): ')    if not nomFichier:        print("未输入文件名,程序退出。")        return    if not os.path.exists(nomFichier):        print(f"错误: 文件 '{nomFichier}' 不存在。")        return    print(f"正在打开文件: {nomFichier}")    total_sum = 0    try:        with open(nomFichier, 'r', encoding='utf-8') as file1: # 使用with语句确保文件正确关闭,并指定编码            lines = file1.readlines()            for line_num, line in enumerate(lines):                clean_line = line.strip() # 移除行首尾的空白字符和换行符                if not clean_line: # 跳过空行                    continue                value = extract_calibration_value(clean_line)                print(f"  处理行 {line_num + 1}: '{clean_line}' -> 提取值: {value}")                total_sum += value        print(f"n文件 '{nomFichier}' 的总和为: {total_sum}")    except Exception as e:        print(f"处理文件时发生错误: {e}")if __name__ == "__main__":    main()

使用方法:

将上述代码保存为 .py 文件(例如 calibration_solver.py)。创建一个文本文件(例如 input.txt),并将示例输入行放入其中:

two1nineeightwothreeabcone2threexyzxtwone3four4nineeightseven2zoneight2347pqrstsixteen

运行Python脚本,当提示时输入 input.txt:

python calibration_solver.py

程序将输出每行的处理结果和最终的总和。

5. 注意事项与总结

选择合适的工具: 对于从复杂、混合格式字符串中提取特定模式(如本例中的首尾数字),正则表达式通常是更灵活和强大的选择。它能够精确控制匹配逻辑,包括处理重叠模式。而像 word2number 这样的库更适用于将完整、规范的数字短语转换为数值。正则表达式的灵活性与复杂性: 正则表达式功能强大,但也可能变得复杂难懂。在构建复杂模式时,建议逐步测试,并使用在线正则表达式测试工具辅助调试。错误处理: 在文件操作和数值转换中,应加入适当的错误处理机制(如 try-except 块),以提高程序的健壮性。例如,当文件不存在或行中不包含任何可识别的数字时。代码可读性 即使使用了强大的工具如正则表达式,也要力求代码清晰易懂。为函数和关键逻辑添加注释,有助于他人理解和维护。

总结:本文详细介绍了如何在Python中从包含阿拉伯数字和英文拼写数字的混合字符串中提取首尾数字。通过深入分析传统字符串替换方法的局限性,我们推荐并演示了基于正则表达式的精确匹配方案,该方案利用零宽先行断言有效解决了重叠匹配的难题。同时,我们也介绍了 word2number 库作为将完整英文数字短语转换为数值的工具,并明确了其在本特定问题中的适用范围。掌握这些技术将有助于您在各种文本处理场景中更高效、更准确地提取数字信息。

以上就是Python字符串中数字与文字数字的鲁棒提取教程的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1375112.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年12月14日 14:43:41
下一篇 2025年12月14日 14:44:01

相关推荐

  • 在 GitHub 中展示 Python 项目代码覆盖率

    本文将介绍如何配置 GitHub Actions,以便在每次推送代码时自动生成并展示 Python 项目的代码覆盖率报告。我们将使用 pytest-cov 工具来生成覆盖率数据,并通过简单的配置修改,使其在 GitHub 上可见。 使用 pytest-cov 生成代码覆盖率报告 要在 GitHub …

    好文分享 2025年12月14日
    000
  • 在GitHub Actions中集成Python代码覆盖率并实现可视化

    本教程详细指导如何在GitHub Actions中为Python项目集成代码覆盖率检测。通过使用pytest-cov工具,我们可以在每次代码推送时自动计算测试覆盖率,并进一步结合Codecov等第三方服务,实现覆盖率数据的可视化展示和持续监控,从而有效提升项目代码质量。 1. 理解代码覆盖率的重要性…

    2025年12月14日
    000
  • 使用BeautifulSoup选择性提取HTML元素并构建新HTML文档

    本文详细介绍了如何利用Python的BeautifulSoup库,从现有HTML文件中高效地提取指定标签及其内容,并构建一个新的HTML文档。通过迭代预定义的标签筛选规则,结合BeautifulSoup的find方法和append功能,我们能够避免繁琐的字符串拼接,实现更简洁、更具可维护性的HTML…

    2025年12月14日
    000
  • Python文件读取与用户输入校验:strip()、with语句与调试技巧

    本文旨在解决Python文件读取时因换行符导致的用户输入校验失败问题。通过引入strip()方法去除字符串末尾的隐形字符,并强调使用with语句进行文件操作以确保资源安全关闭。同时,提供了实用的调试技巧,帮助开发者高效定位并解决代码中的潜在问题,提升文件处理代码的健壮性与可维护性。 在python编…

    2025年12月14日
    000
  • python中断言的使用注意

    断言仅用于调试,不应控制程序流程。使用assert可帮助发现错误,但不可依赖其验证输入或处理异常,因-O模式下assert会被忽略,导致校验失效;应改用if+raise处理运行时错误。 断言(assert)在 Python 中是一种调试工具,用来检查某个条件是否为真。如果条件不满足,程序会抛出 As…

    2025年12月14日
    000
  • 高效构建非对角线稀疏矩阵:Python COO格式实践

    本文旨在指导读者如何使用Python及其科学计算库(NumPy, SciPy)高效构建具有特定非对角线元素的稀疏矩阵,并将其转换为COO(Coordinate)格式。我们将探讨两种主要场景:填充所有非对角线位置,以及根据预定义索引和值构建矩阵,最终实现一个对角线元素为零的邻接矩阵。 在许多科学计算和…

    2025年12月14日
    000
  • Python模块间全局变量共享:理解import *的陷阱与正确实践

    本文深入探讨了在Python和Pygame应用中,跨模块共享全局变量时常遇到的作用域问题。通过分析from module import *语句可能导致的变量副本创建,而非共享同一实例的机制,文章提出并详细阐述了使用import module后通过module.variable_name方式访问变量的…

    2025年12月14日
    000
  • 提升Python数据处理性能:从多线程到多进程的优化实践

    本文探讨了在Python中处理大规模数据列表匹配和筛选时的性能瓶颈。针对传统多线程在CPU密集型任务中受限于GIL的局限性,文章提出并详细阐述了如何利用Python的multiprocessing模块,通过创建独立的进程来并行化任务,从而显著提升数据处理效率。文章提供了完整的代码示例和专业解析,帮助…

    2025年12月14日
    000
  • Python如何保存py文件

    保存py文件是通过文本编辑器或IDE将Python代码以.py扩展名存储。使用记事本或VS Code等编辑器编写代码后,选择“另存为”,输入文件名如hello.py,保存类型选“所有文件”,编码用UTF-8;在IDLE、PyCharm等IDE中,新建Python文件,编写代码后按Ctrl+S,首次保…

    2025年12月14日
    000
  • 在多台电脑上协同开发:使用Git进行代码同步

    在多台电脑上协同开发,最常见的需求就是如何在不同设备间同步代码,保证开发进度的一致性。传统的做法,例如使用Google Drive等云盘进行手动上传下载,效率低下且容易出错。Git作为一种强大的版本控制系统,可以完美解决这个问题。 使用Git进行版本控制 Git是一个分布式版本控制系统,它允许你跟踪…

    2025年12月14日
    000
  • Python跨模块全局变量管理:避免from import *陷阱

    本文深入探讨Python中跨模块共享全局变量时常见的from module import *陷阱。当使用此语法时,模块会创建变量的本地副本,导致更新不一致。正确的做法是使用import module,并通过module.variable形式直接引用原始模块中的变量,确保所有模块访问和修改的是同一个实…

    2025年12月14日
    000
  • 解决Web抓取中HTML内容显示不完整问题:终端限制与完整数据保存策略

    本教程旨在解决Web抓取过程中,终端显示HTML内容不完整的问题。当抓取到的HTML文本过长时,终端的行数限制可能导致内容截断。文章将详细介绍如何通过将抓取到的完整HTML内容保存到本地文件,从而克服这一限制,确保开发者能够查阅和分析所有抓取到的数据。 理解问题:终端输出限制 在进行web抓取时,开…

    2025年12月14日
    000
  • Python正则表达式:高效提取整数与分数

    本文详细阐述如何利用Python正则表达式从混合文本中准确提取整数和分数。通过构建d+(?:/d+)?等灵活模式,解决了传统d+无法识别分数的问题,并结合pandas和re模块进行实战演示,帮助读者掌握从非结构化文本中提取特定数值数据的专业技巧。 引言 在数据分析和处理中,我们经常需要从非结构化或半…

    2025年12月14日
    000
  • Discord Bot开发:实现交互式问卷并有效收集用户文本回复

    本教程详细指导如何在Discord机器人中实现交互式问卷功能,并确保将用户的文本回答(message.content)正确收集为字符串列表。文章涵盖了bot.wait.for的使用、消息检查机制以及答案存储的关键步骤,旨在帮助开发者构建功能完善的Discord交互应用。 在开发discord机器人时…

    2025年12月14日
    000
  • Python文件读取与字符串比较:解决意外换行符及最佳实践

    本文探讨Python文件读取时因隐含换行符导致字符串比较失败的问题,并提供strip()方法作为解决方案。同时,深入讲解了使用with语句进行文件操作的优势,强调了资源管理的最佳实践,并分享了有效的调试技巧,帮助开发者编写更健壮的代码。 在Python编程中,文件读写是常见的操作。然而,初学者在进行…

    2025年12月14日
    000
  • 使用Python构建弗洛伊德三角形:原理与高效实现

    本教程详细介绍了如何使用Python生成弗洛伊德三角形。文章首先阐释了弗洛伊德三角形的结构特点,随后分析了初学者在实现过程中可能遇到的常见逻辑错误。核心内容展示了一种简洁高效的Python实现方案,利用循环和Python的特性(如切片打印和海象运算符)来按行生成递增的数字序列,确保输出符合预期的三角…

    2025年12月14日
    000
  • python如何删除字符串的特殊字符

    使用isalnum()可保留字母数字,2. 正则表达式灵活过滤特殊字符,3. string.punctuation去除标准标点,按需选择方法。 在Python中删除字符串中的特殊字符,通常是指去除标点符号、控制字符或其他非字母数字的符号。可以通过多种方式实现,下面介绍几种常用且有效的方法。 使用字符…

    2025年12月14日
    000
  • 使用BeautifulSoup从HTML中提取特定标签并生成新页面

    本文详细介绍了如何利用Python的BeautifulSoup库,从现有HTML文档中高效、精准地提取指定标签及其内容,并将其整合到一个全新的HTML页面中。通过初始化新的HTML结构、定义目标标签列表并利用BeautifulSoup的append方法,实现了比传统字符串拼接更优雅、更健壮的解决方案…

    2025年12月14日 好文分享
    000
  • Python文件读取与字符串验证:解决换行符陷阱与优化文件操作

    本文深入探讨Python文件读取时因f.read()方法默认包含换行符,导致字符串比较验证失败的常见问题。教程将详细介绍如何使用strip()方法清除字符串末尾的空白字符,并强调利用with语句作为上下文管理器进行文件操作的最佳实践,以确保资源正确释放。同时,提供实用的调试技巧,帮助开发者编写更健壮…

    2025年12月14日
    000
  • 高效生成稀疏邻接矩阵的COO格式数据

    本文旨在教授如何高效地在Python中生成用于稀疏邻接矩阵(特别是COO格式)的行(row)和列(col)索引,以确保矩阵对角线元素为零(即无自环)。我们将探讨使用NumPy生成所有非对角线索引的方法,以及如何从已有的COO格式数据构建矩阵,并最终将其应用于Scipy的稀疏矩阵构建。 在图论和网络分…

    2025年12月14日
    000

发表回复

登录后才能评论
关注微信