Flask-SQLAlchemy 数据重复插入问题及解决方案

Flask-SQLAlchemy 数据重复插入问题及解决方案

本文旨在探讨并解决在使用 flask 和 sqlalchemy 进行数据持久化时,由页面刷新或脚本重复执行导致的数据库数据重复插入问题。我们将深入分析两种核心策略:通过数据库层面的唯一性约束来阻止重复数据,以及利用 web 开发中的 post-redirect-get 模式来避免客户端意外的重复提交,同时也会解释 flask 应用上下文的正确使用。

引言:Flask-SQLAlchemy 数据重复插入的挑战

在使用 Flask 结合 SQLAlchemy 管理数据库时,开发者常会遇到一个常见但令人困扰的问题:数据在不经意间被重复插入数据库。这通常发生在以下场景:

页面刷新/回退操作: 用户在提交表单后刷新页面,或使用浏览器回退功能,可能导致 POST 请求被重新发送,从而触发数据再次插入。脚本重复执行: 在开发或测试阶段,如果用于初始化或填充数据的脚本被多次运行,而没有适当的去重机制,也会导致数据重复。缺乏业务逻辑校验: 在数据插入前,未对现有数据进行检查,导致即使数据已存在,仍会尝试插入新的重复记录。

原始代码示例展示了在 app.app_context() 中循环插入项目和经验数据,如果这段代码被多次执行,例如在每次应用启动时,或者在某个视图函数中未正确处理请求生命周期,就会导致数据库中出现大量重复记录。

# 原始数据插入逻辑示例with app.app_context():    for project_data_item in projectData:        project_entry = Project(            projectName=project_data_item["projectName"],            projectDescription=project_data_item["projectDescription"],            projectUrl=project_data_item["projectUrl"],        )        db.session.add(project_entry)    for experience_data_item in experience_data:        experience_entry = Experience(            companyName=experience_data_item["companyName"],            companyDescription=experience_data_item["companyDescription"],            companyUrl=experience_data_item["companyUrl"],            companyRole=experience_data_item["companyRole"],            companyDuration=experience_data_item["companyDuration"],            companyLocation=experience_data_item["companyLocation"],            companyResponsibilities=experience_data_item["companyResponsibilities"],            projects=experience_data_item["projects"]        )        db.session.add(experience_entry)    db.session.commit()

接下来,我们将探讨两种主要的解决方案来有效防止此类重复插入。

解决方案一:通过数据库唯一性约束防止重复

最直接且可靠的方法是在数据库层面强制执行数据的唯一性。这意味着即使应用程序尝试插入重复数据,数据库也会拒绝该操作,并抛出错误。

1. 定义唯一性约束

在 SQLAlchemy 模型中,可以通过 unique=True 参数为单个字段设置唯一性,或者使用 UniqueConstraint 为多个字段组合设置唯一性。

示例:为 Project 模型设置 projectName 唯一

from flask_sqlalchemy import SQLAlchemyfrom sqlalchemy import UniqueConstraintdb = SQLAlchemy()class Project(db.Model):    id = db.Column(db.Integer, primary_key=True)    projectName = db.Column(db.String(80), unique=True, nullable=False)    projectDescription = db.Column(db.Text, nullable=True)    projectUrl = db.Column(db.String(200), nullable=True)    def __repr__(self):        return f''

示例:为 Experience 模型设置多字段组合唯一

假设一个“经验”由公司名称、角色和持续时间共同确定其唯一性。

class Experience(db.Model):    id = db.Column(db.Integer, primary_key=True)    companyName = db.Column(db.String(120), nullable=False)    companyDescription = db.Column(db.Text, nullable=True)    companyUrl = db.Column(db.String(200), nullable=True)    companyRole = db.Column(db.String(120), nullable=False)    companyDuration = db.Column(db.String(120), nullable=False)    companyLocation = db.Column(db.String(120), nullable=True)    companyResponsibilities = db.Column(db.Text, nullable=True)    # projects 字段可能需要定义关系,此处省略    __table_args__ = (        UniqueConstraint('companyName', 'companyRole', 'companyDuration', name='_company_role_duration_uc'),    )    def __repr__(self):        return f''

2. 处理唯一性约束冲突

当尝试插入违反唯一性约束的数据时,数据库会抛出 IntegrityError。在应用程序中,需要捕获并处理这个错误。

方法一:先查询后插入 (Select-Before-Insert)

在插入数据前,先查询数据库中是否已存在具有相同唯一标识的数据。

from sqlalchemy.exc import IntegrityErrordef add_project_if_not_exists(project_data_item):    with app.app_context():        existing_project = Project.query.filter_by(projectName=project_data_item["projectName"]).first()        if existing_project:            print(f"项目 '{project_data_item['projectName']}' 已存在,跳过插入。")            return existing_project        else:            project_entry = Project(                projectName=project_data_item["projectName"],                projectDescription=project_data_item["projectDescription"],                projectUrl=project_data_item["projectUrl"],            )            db.session.add(project_entry)            try:                db.session.commit()                print(f"项目 '{project_data_item['projectName']}' 插入成功。")                return project_entry            except IntegrityError:                db.session.rollback() # 回滚事务                print(f"项目 '{project_data_item['projectName']}' 插入失败,可能存在并发冲突。")                # 重新尝试查询或处理                return Project.query.filter_by(projectName=project_data_item["projectName"]).first()# 使用示例# for project_data_item in projectData:#     add_project_if_not_exists(project_data_item)

方法二:尝试插入并捕获错误

直接尝试插入,如果发生 IntegrityError 则回滚事务。这种方法在并发量高时可能效率更高,因为它避免了额外的 SELECT 查询。

from sqlalchemy.exc import IntegrityErrordef add_experience_robustly(experience_data_item):    with app.app_context():        experience_entry = Experience(            companyName=experience_data_item["companyName"],            companyDescription=experience_data_item["companyDescription"],            companyUrl=experience_data_item["companyUrl"],            companyRole=experience_data_item["companyRole"],            companyDuration=experience_data_item["companyDuration"],            companyLocation=experience_data_item["companyLocation"],            companyResponsibilities=experience_data_item["companyResponsibilities"],        )        db.session.add(experience_entry)        try:            db.session.commit()            print(f"经验 '{experience_data_item['companyName']} - {experience_data_item['companyRole']}' 插入成功。")            return experience_entry        except IntegrityError:            db.session.rollback() # 回滚事务            print(f"经验 '{experience_data_item['companyName']} - {experience_data_item['companyRole']}' 已存在或插入失败。")            # 如果需要获取已存在的对象,可以在这里再次查询            return Experience.query.filter_by(                companyName=experience_data_item["companyName"],                companyRole=experience_data_item["companyRole"],                companyDuration=experience_data_item["companyDuration"]            ).first()# 使用示例# for experience_data_item in experience_data:#     add_experience_robustly(experience_data_item)

解决方案二:利用 POST-Redirect-GET 模式防止重复提交

在 Web 应用中,当用户提交表单(通常是 POST 请求)后,如果直接渲染页面或返回数据,用户刷新浏览器可能会导致浏览器重新发送 POST 请求,从而引发重复提交。POST-Redirect-GET (PRG) 模式是解决此问题的标准实践。

1. POST-Redirect-GET 模式原理

POST 请求: 用户通过表单提交数据到服务器(POST 请求)。处理数据: 服务器接收并处理数据(例如,将数据存入数据库)。重定向: 服务器不直接返回响应页面,而是发送一个重定向(HTTP 302 Found)响应到另一个 URL,通常是一个 GET 请求的页面。GET 请求: 浏览器接收到重定向后,会发起一个新的 GET 请求到指定的 URL。渲染页面: 服务器处理 GET 请求并返回页面。

通过这种方式,即使用户刷新浏览器,也只会刷新最后的 GET 请求页面,而不会重新发送 POST 请求。

2. Flask 中的实现

from flask import Flask, request, redirect, url_for, render_template_stringfrom flask_sqlalchemy import SQLAlchemyapp = Flask(__name__)app.config['SQLALCHEMY_DATABASE_URI'] = 'sqlite:///test.db'app.config['SQLALCHEMY_TRACK_MODIFICATIONS'] = Falsedb = SQLAlchemy(app)# 假设 Project 模型已定义并包含 unique=True 的 projectNameclass Project(db.Model):    id = db.Column(db.Integer, primary_key=True)    projectName = db.Column(db.String(80), unique=True, nullable=False)    projectDescription = db.Column(db.Text, nullable=True)    projectUrl = db.Column(db.String(200), nullable=True)    def __repr__(self):        return f''# 在应用上下文外创建表 (通常在独立脚本或第一次运行时)with app.app_context():    db.create_all()@app.route('/', methods=['GET'])def index():    # 显示一个简单的表单    return render_template_string("""        

添加新项目

项目名称:
项目描述:
项目URL:

现有项目

    {% for project in projects %}
  • {{ project.projectName }} - {{ project.projectDescription }}
  • {% endfor %}
""", projects=Project.query.all())@app.route('/add_project', methods=['POST'])def add_project(): if request.method == 'POST': project_name = request.form['projectName'] project_description = request.form['projectDescription'] project_url = request.form['projectUrl'] # 检查是否已存在,或者直接尝试插入并处理 IntegrityError existing_project = Project.query.filter_by(projectName=project_name).first() if existing_project: print(f"项目 '{project_name}' 已存在,跳过插入。") # 可以返回一个错误消息或重定向到带有消息的页面 return redirect(url_for('index', message='Project already exists!')) new_project = Project( projectName=project_name, projectDescription=project_description, projectUrl=project_url ) db.session.add(new_project) try: db.session.commit() print(f"项目 '{project_name}' 插入成功。") # 成功后重定向到GET请求的页面 return redirect(url_for('index', message='Project added successfully!')) except IntegrityError: db.session.rollback() print(f"项目 '{project_name}' 插入失败,可能存在并发冲突。") return redirect(url_for('index', message='Failed to add project due to conflict!')) # 对于GET请求到/add_project,重定向回首页或显示错误 return redirect(url_for('index'))# if __name__ == '__main__':# app.run(debug=True)

在这个例子中,当用户提交表单到 /add_project(POST请求)后,数据被处理并存入数据库,然后用户被重定向到 / 页面(GET请求)。这样,即使刷新 / 页面,也不会重复提交表单。

关于 app.app_context() 的正确理解

原始问题中提到“如果将其取出 app.app_context() 就会报错”。这是因为 app.app_context() 提供了一个上下文环境,使得 Flask 扩展(如 Flask-SQLAlchemy)能够正常工作。

app.app_context(): 用于在 Flask 应用之外(例如,在独立的脚本中、命令行工具中或后台任务中)访问应用程序的配置、数据库连接等资源。它模拟了一个应用环境,允许你执行需要访问 current_app 或其扩展的操作。request_context(): 在处理 Web 请求时,Flask 会自动创建一个请求上下文。在这个上下文中,你可以访问 request、session 等对象,并且 Flask-SQLAlchemy 等扩展也会自动使用这个上下文来管理数据库会话。

因此,在视图函数内部,你通常不需要显式地使用 with app.app_context():,因为请求上下文已经为你提供了必要的环境。但在启动应用时进行数据初始化,或者运行一个独立的管理脚本时,app.app_context() 是必不可少的。

总结与最佳实践

防止 Flask-SQLAlchemy 中数据重复插入的最佳策略通常是结合使用上述两种方法:

数据库层面的唯一性约束是基础: 它是防止数据重复的最强防线,即使应用层逻辑有漏洞,数据库也能保证数据的完整性。Web 流程中的 POST-Redirect-GET 模式是用户体验的关键: 它避免了用户因无意操作(如刷新、回退)导致重复提交,提升了用户体验。在应用层进行数据存在性检查(Select-Before-Insert)或错误捕获: 可以在插入前进行检查,提供更友好的用户反馈,或者通过捕获 IntegrityError 来处理并发冲突,确保事务的正确性。正确使用 app.app_context(): 确保在非请求上下文中操作数据库时,始终显式地进入应用上下文。

通过综合运用这些技术,你可以构建出健壮、可靠的 Flask 应用程序,有效管理数据库中的数据完整性。

以上就是Flask-SQLAlchemy 数据重复插入问题及解决方案的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1381599.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年12月14日 23:05:46
在 Behave 测试中利用 Fixture 自动化临时目录创建与清理
下一篇 2025年12月14日 23:05:59

相关推荐

  • composer require-dev和require有什么不同_Composer Require与Require-Dev区别解析

    require用于声明项目运行必需的依赖,如框架、数据库组件和第三方SDK,这些包会随项目部署到生产环境;2. require-dev用于声明仅在开发和测试阶段需要的工具,如PHPUnit、PHPStan、Faker等,不会默认部署到生产环境;3. 安装时composer install根据环境决定…

    2026年5月10日
    1000
  • 修复Django电商项目中AJAX过滤产品列表图片不显示问题

    在Django电商项目中,当使用AJAX动态加载过滤后的产品列表时,常遇到图片无法正常显示的问题。这通常是由于前端模板中图片加载方式(如data-setbg属性结合JavaScript库)与AJAX动态内容更新机制不兼容所致。解决方案是直接在AJAX返回的HTML中使用标准的标签来渲染图片,确保浏览…

    2026年5月10日
    000
  • Matplotlib 地图中多类型图例的创建与优化

    Matplotlib 地图中多类型图例的创建与优化Matplotlib 地图中多类型图例的创建与优化Matplotlib 地图中多类型图例的创建与优化Matplotlib 地图中多类型图例的创建与优化

    本教程旨在解决matplotlib地图可视化中,如何在一个图例中同时展示颜色块(如区域分类)和自定义标记(如特定兴趣点)的问题。文章详细介绍了当传统`patch`对象无法正确显示标记时,如何利用`matplotlib.lines.line2d`创建标记图例句柄,并将其与颜色块图例句柄合并,从而生成一…

    2026年5月10日 用户投稿
    100
  • Golang JSON序列化:控制敏感字段暴露的最佳实践

    本教程探讨golang中如何高效控制结构体字段在json序列化时的可见性。当需要将包含敏感信息的结构体数组转换为json响应时,通过利用`encoding/json`包提供的结构体标签,特别是`json:”-“`,可以轻松实现对特定字段的忽略,从而避免敏感数据泄露,确保api…

    2026年5月10日
    000
  • 利用海象运算符简化条件赋值:Python教程与最佳实践

    本文旨在探讨Python中海象运算符(:=)在条件赋值场景下的应用。通过对比传统if/else语句与海象运算符,以及条件表达式,分析海象运算符在简化代码、提高可读性方面的优势与局限性。并通过具体示例,展示如何在列表推导式等场景下合理使用海象运算符,同时强调其潜在的复杂性及替代方案,帮助开发者更好地掌…

    2026年5月10日
    100
  • Debian syslog性能优化技巧有哪些

    提升Debian系统syslog (通常基于rsyslog)性能,关键在于精简配置和高效处理日志。以下策略能有效优化日志管理,提升系统整体性能: 精简配置,高效加载: 在rsyslog配置文件中,仅加载必要的输入、输出和解析模块。 使用全局指令设置日志级别和格式,避免不必要的处理。 自定义模板: 创…

    2026年5月10日
    000
  • 比特币新手教程 比特币交易平台有哪些

    比特币是一种去中心化的数字货币,基于区块链技术实现点对点交易,具有匿名性、有限发行和不可篡改等特点;新手可通过交易所购买,P2P交易获得比特币,常用平台包括Binance、OKX和Huobi;交易流程包括注册账户、实名认证、绑定支付方式、充值法币并下单购买,可选择市价单或限价单;比特币存储方式有交易…

    2026年5月10日
    000
  • c++中的SFINAE技术是什么_c++模板编程中的SFINAE原理与应用

    SFINAE 是“替换失败不是错误”的原则,指模板实例化时若参数替换导致错误,只要存在其他合法候选,编译器不报错而是继续重载决议。它用于条件启用模板、类型检测等场景,如通过 decltype 或 enable_if 控制函数重载,实现类型特征判断。尽管 C++20 引入 Concepts 简化了部分…

    2026年5月10日
    000
  • Go语言mgo查询构建:深入理解bson.M与日期范围查询的正确实践

    本文旨在解决go语言mgo库中构建复杂查询时,特别是涉及嵌套`bson.m`和日期范围筛选的常见错误。我们将深入剖析`bson.m`的类型特性,解释为何直接索引`interface{}`会导致“invalid operation”错误,并提供一种推荐的、结构清晰的代码重构方案,以确保查询条件能够正确…

    2026年5月10日
    100
  • vscode上怎么运行html_vscode上运行html步骤【指南】

    首先保存文件为.html格式,再通过浏览器或Live Server插件打开预览;推荐安装Live Server实现本地服务器运行与实时刷新,提升开发体验。 在 VS Code 上运行 HTML 文件并不需要复杂的配置,只需几个简单步骤即可预览页面效果。VS Code 本身是一个代码编辑器,不直接运行…

    2026年5月10日
    100
  • RichHandler与Rich Progress集成:解决显示冲突的教程

    在使用rich库的`richhandler`进行日志输出并同时使用`progress`组件时,可能会遇到显示错乱或溢出问题。这通常是由于为`richhandler`和`progress`分别创建了独立的`console`实例导致的。解决方案是确保日志处理器和进度条组件共享同一个`console`实例…

    2026年5月10日
    000
  • 修复点击时按钮抖动:CSS垂直对齐实践

    本文探讨了在Web开发中,交互式按钮(如播放/暂停按钮)在点击时发生意外垂直位移的问题。通过分析CSS样式变化对元素布局的影响,我们发现这是由于按钮不同状态下的边框样式和内边距改变,以及默认的垂直对齐行为共同作用所致。核心解决方案是利用CSS的vertical-align属性,将其设置为middle…

    2026年5月10日
    000
  • Golang goroutine与channel调试技巧

    使用go run -race检测数据竞争,结合runtime.NumGoroutine监控协程数量,通过pprof分析阻塞调用栈,利用select超时避免永久阻塞,有效排查goroutine泄漏、死锁和数据竞争问题。 Go语言的goroutine和channel是并发编程的核心,但它们也带来了调试上…

    2026年5月10日
    000
  • 使用 Jupyter Notebook 进行探索性数据分析

    Jupyter Notebook通过单元格实现代码与Markdown结合,支持数据导入(pandas)、清洗(fillna)、探索(matplotlib/seaborn可视化)、统计分析(describe/corr)和特征工程,便于记录与分享分析过程。 Jupyter Notebook 是进行探索性…

    2026年5月10日
    000
  • 《魔兽世界》将于6月11日开启国服回归技术测试

    《魔兽世界》将于6月11日开启国服回归技术测试《魔兽世界》将于6月11日开启国服回归技术测试《魔兽世界》将于6月11日开启国服回归技术测试《魔兽世界》将于6月11日开启国服回归技术测试

    《%ign%ignore_a_1%re_a_1%》官方宣布,将于6月11日开启国服回归技术测试,时间为7天,并称可以在6月内正式开服,玩家们可以访问官网下载战网客户端并预下载“巫妖王之怒”客户端,技术测试详情见下图。 WordAi WordAI是一个AI驱动的内容重写平台 53 查看详情 以上就是《…

    2026年5月10日 用户投稿
    200
  • 如何在HTML中插入表单元素_HTML表单控件与输入类型使用指南

    HTML表单通过标签构建,包含action和method属性定义数据提交目标与方式,常用input类型如text、password、email等适配不同输入需求,配合label、required、placeholder提升可用性,结合textarea、select、button等控件实现完整交互,是…

    2026年5月10日
    000
  • 前端缓存策略与JavaScript存储管理

    根据数据特性选择合适的存储方式并制定清晰的读写与清理逻辑,能显著提升前端性能;合理运用Cookie、localStorage、sessionStorage、IndexedDB及Cache API,结合缓存策略与定期清理机制,可在保证用户体验的同时避免安全与性能隐患。 前端缓存和JavaScript存…

    2026年5月10日
    100
  • 网站标题关键词更新后,搜索引擎为何仍显示旧标题?

    网站标题更新后,搜索引擎为何显示旧标题? 网站SEO优化中,站长常修改网站标题关键词,期望搜索结果显示自定义标题。然而,即使更新标签、meta keywords、meta description和结构化数据中的name属性后,搜索结果仍显示旧标题,这令人费解。本文将对此进行解释。 问题:站长修改了网…

    2026年5月10日
    100
  • HTML5网页如何实现手势操作 HTML5网页移动端交互的处理技巧

    首先利用原生touch事件实现滑动判断,再通过preventDefault解决滚动冲突,接着引入Hammer.js处理复杂手势,最后通过优化点击区域、避免事件冲突和增加视觉反馈提升体验。 在移动端浏览器中,HTML5网页可以通过触摸事件实现手势操作,提升用户体验。虽然原生JavaScript提供了基…

    2026年5月10日
    000
  • 创建指定大小并填充特定数据的Golang文件教程

    本文将介绍如何使用Golang创建一个指定大小的文件,并用特定数据填充它。我们将使用 `os` 包提供的函数来创建和截断文件,从而实现快速生成大文件的目的。示例代码展示了如何创建一个10MB的文件,并将其填充为全零数据。掌握这些方法,可以方便地在例如日志系统或磁盘队列等场景中,预先创建测试文件或初始…

    2026年5月10日
    000

发表回复

登录后才能评论
关注微信