FastAPI高级实践:高效上传文件与复杂JSON数据(含列表和字典)

FastAPI高级实践:高效上传文件与复杂JSON数据(含列表和字典)

本教程深入探讨了在FastAPI中同时上传文件和包含列表、字典等复杂结构的JSON数据时遇到的挑战及解决方案。文章详细阐述了422 Unprocessable Entity错误的原因,并提供了两种基于Pydantic BaseModel的专业方法,通过将JSON数据作为表单字符串或利用Pydantic的验证器,有效实现文件与复杂JSON数据的协同上传,并附带详细代码示例和使用说明。

1. 引言

fastapi以其高性能和易用性,已成为构建现代web api的热门选择。在实际应用中,我们经常需要处理文件上传,同时还需要接收包含复杂结构(如列表、字典嵌套)的json数据。然而,直接将文件和pydantic模型作为请求体参数混合使用时,开发者常常会遇到422 unprocessable entity错误。本教程将深入分析导致这些问题的原因,并提供两种专业且健壮的解决方案,帮助您高效地在fastapi中实现文件与复杂json数据的协同上传。

2. 理解挑战:为什么会遇到422错误?

在FastAPI中,当您尝试同时上传文件(UploadFile = File(…))和一个基于Pydantic BaseModel的复杂JSON数据时,通常会遇到422 Unprocessable Entity错误。这背后的原因主要有以下几点:

2.1 Pydantic模型与查询参数的限制

列表型查询参数需要明确声明: 如果您的Pydantic模型中包含List类型的字段,且这些字段是作为查询参数(而非请求体)传递的,您需要使用Field(Query(…))进行明确声明。例如,words: List[str] = Field(Query(…))。否则,FastAPI可能无法正确解析。复杂对象列表不能作为查询参数: 像List[BaseBox]这样包含字典或Pydantic模型的列表,不能作为查询参数传递。HTTP协议的查询字符串设计不适合传递这种复杂结构。如果您尝试这样做,FastAPI会抛出断言错误,指出此类参数“只能是请求体(request body)”。

2.2 HTTP协议与数据编码冲突

这是核心问题。当您的FastAPI端点包含file: UploadFile = File(…)这样的参数时,FastAPI会将预期的请求体编码类型设置为multipart/form-data。这种编码方式通常用于发送文件和简单的表单字段。

然而,当您同时尝试通过Pydantic BaseModel接收一个JSON对象作为请求体时,FastAPI通常期望的编码类型是application/json。HTTP协议标准不允许在同一个请求体中同时使用multipart/form-data和application/json两种编码。因此,当FastAPI接收到一个multipart/form-data请求,但其中又包含一个它期望解析为application/json的Pydantic模型时,就会发生解析错误,导致422 Unprocessable Entity。

2.3 GET请求的限制

此外,值得注意的是,HTTP GET或HEAD请求方法不应包含请求体。GET请求应仅用于请求数据,不应附带数据。因此,如果您尝试在GET请求中发送Pydantic模型作为请求体,FastAPI也会报错。文件上传通常是POST请求,但理解这一限制也很重要。

3. 核心概念与解决方案

为了克服上述挑战,我们需要采用一些策略来确保文件和复杂JSON数据都能被正确地打包和解析。核心思想是:将复杂的JSON数据序列化为字符串,作为multipart/form-data中的一个普通表单字段进行传输,然后在服务器端进行反序列化。

3.1 处理列表型查询参数

在继续讨论文件和JSON混合上传之前,先明确如何正确处理列表型查询参数,这在某些场景下仍然适用。

from typing import List, Optionalfrom pydantic import BaseModel, Fieldfrom fastapi import Queryclass QueryParams(BaseModel):    width: Optional[float] = Field(None)    height: Optional[float] = Field(None)    words: List[str] = Field(Query(...)) # 明确声明为列表查询参数

上述QueryParams模型可以作为依赖注入到FastAPI端点中,用于解析URL中的查询参数,例如:/submit?width=10&words=apple&words=banana。

3.2 解决文件与JSON数据混合上传的策略

以下是两种在FastAPI中同时上传文件和复杂JSON数据的推荐策略。

策略一:将JSON数据作为表单字符串传输并手动解析

这种方法的核心是将复杂的JSON对象序列化为一个JSON字符串,然后将其作为multipart/form-data请求中的一个普通文本字段(Form参数)发送。在服务器端,我们定义一个自定义依赖项(Depends),负责接收这个字符串并将其反序列化为Pydantic模型。

优点:

逻辑清晰,JSON解析过程明确。兼容性较好,客户端只需将JSON对象转换为字符串即可。

缺点:

在FastAPI的交互式API文档(Swagger UI)中,JSON字段会显示为一个普通的字符串输入框,缺乏自动生成的JSON结构示例,用户体验稍差。客户端需要手动将JSON对象序列化为字符串。

代码示例 (app.py):

from fastapi import FastAPI, status, Form, UploadFile, File, Depends, Query, HTTPExceptionfrom pydantic import BaseModel, Field, ValidationErrorfrom fastapi.encoders import jsonable_encoderfrom typing import Optional, Listimport jsonapp = FastAPI()# 定义查询参数模型class BaseParams(BaseModel):    width: Optional[float] = Field(None)    height: Optional[float] = Field(None)    words: List[str] = Field(Query(...)) # 列表型查询参数# 定义嵌套的JSON对象模型class BaseBox(BaseModel):    l: float = Field(...)    t: float = Field(...)    r: float = Field(...)    b: float = Field(...)# 定义复杂的JSON数据模型class Base(BaseModel):    boxes: List[BaseBox] = Field(...)    comments: List[str] = Field(...)    code: int = Field(...)# 自定义依赖项,用于解析作为表单字符串传输的JSON数据def parse_json_form_data(data: str = Form(...)):    try:        # 尝试将字符串解析为Base模型        return Base.model_validate_json(data)    except ValidationError as e:        # 如果解析失败,抛出422错误        raise HTTPException(            detail=jsonable_encoder(e.errors()),            status_code=status.HTTP_422_UNPROCESSABLE_ENTITY,        )@app.post("/submit")def submit(    base_params: BaseParams = Depends(),      # 依赖注入查询参数    base: Base = Depends(parse_json_form_data), # 依赖注入解析后的JSON数据    files: List[UploadFile] = File(...),      # 接收文件列表):    """    接收查询参数、JSON数据(作为表单字符串)和文件列表。    """    return {        "Params": base_params,        "JSON Payload": base,        "Filenames": [file.filename for file in files],    }# 启动应用:uvicorn app:app --reload

客户端请求示例:

当使用curl或其他HTTP客户端发送请求时,需要将Base模型的数据序列化为JSON字符串,并作为multipart/form-data中的一个字段发送。

curl -X 'POST'   'http://localhost:8000/submit?width=10.5&height=20.0&words=hello&words=world'   -H 'accept: application/json'   -H 'Content-Type: multipart/form-data'   -F 'data={"boxes": [{"l": 0,"t": 0,"r": 0,"b": 0}, {"l": 10,"t": 10,"r": 20,"b": 20}], "comments": ["foo", "bar"], "code": 123}'   -F 'files=@./test_image.png;type=image/png'   -F 'files=@./another_file.txt;type=text/plain'

data: 包含序列化JSON字符串的表单字段。files: 包含要上传的文件。

策略二:利用Pydantic的model_validator优化JSON数据解析

这种方法与策略一类似,但它利用Pydantic v2的model_validator(或Pydantic v1的@root_validator)在模型实例化之前对传入的数据进行预处理。如果传入的是字符串,model_validator会尝试将其解析为JSON。结合Body(…)使用,可以使FastAPI在Swagger UI中更好地展示JSON模型的结构。

优点:

Swagger UI对JSON数据有更好的展示和自动生成示例,用户体验更佳。客户端发送请求时,如果Content-Type允许,可以直接发送结构化JSON(但在multipart/form-data场景下,仍需发送字符串)。代码更简洁,将解析逻辑封装在Pydantic模型内部。

缺点:

需要Pydantic v2或更高版本才能使用model_validator。model_validator的实现对于初学者可能略显复杂。

代码示例 (app.py):

from fastapi import FastAPI, Body, UploadFile, File, Depends, Query, HTTPExceptionfrom pydantic import BaseModel, Field, model_validator, ValidationErrorfrom typing import Optional, Listimport jsonapp = FastAPI()# 定义查询参数模型class BaseParams(BaseModel):    width: Optional[float] = Field(None)    height: Optional[float] = Field(None)    words: List[str] = Field(Query(...))# 定义嵌套的JSON对象模型class BaseBox(BaseModel):    l: float = Field(...)    t: float = Field(...)    r: float = Field(...)    b: float = Field(...)# 定义复杂的JSON数据模型,并添加model_validatorclass Base(BaseModel):    boxes: List[BaseBox] = Field(...)    comments: List[str] = Field(...)    code: int = Field(...)    # Pydantic v2的model_validator,在模型实例化前对值进行预处理    @model_validator(mode="before")    @classmethod    def validate_to_json(cls, value):        if isinstance(value, str):            try:                return cls(**json.loads(value))            except json.JSONDecodeError as e:                raise ValueError(f"Invalid JSON string for Base model: {e}")        return value@app.post("/submit")def submit(    base_params: BaseParams = Depends(), # 依赖注入查询参数    base: Base = Body(...),              # Pydantic模型作为请求体,由model_validator处理    files: List[UploadFile] = File(...), # 接收文件列表):    """    接收查询参数、JSON数据(由model_validator处理)和文件列表。    """    return {        "Params": base_params,        "JSON Payload": base,        "Filenames": [file.filename for file in files],    }# 启动应用:uvicorn app:app --reload

客户端请求示例:

与策略一类似,客户端仍然需要将JSON数据序列化为字符串,并作为multipart/form-data中的一个字段发送。Body(…)结合model_validator使得FastAPI能够处理这种字符串形式的JSON输入。

curl -X 'POST'   'http://localhost:8000/submit?width=10.5&height=20.0&words=alpha&words=beta'   -H 'accept: application/json'   -H 'Content-Type: multipart/form-data'   -F 'base={"boxes": [{"l": 0,"t": 0,"r": 0,"b": 0}], "comments": ["hello", "world"], "code": 456}'   -F 'files=@./document.pdf;type=application/pdf'

base: 包含序列化JSON字符串的表单字段。files: 包含要上传的文件。

4. 总结与注意事项

通过本教程,我们深入探讨了在FastAPI中同时上传文件和复杂JSON数据时可能遇到的422 Unprocessable Entity错误的原因,并提供了两种有效的解决方案。

核心冲突: 理解multipart/form-data和application/json在同一请求体中的编码冲突是解决问题的关键。策略选择:策略一(表单字符串与手动解析):适用于对Swagger UI展示要求不高,或偏好明确分离解析逻辑的场景。策略二(model_validator优化解析):提供更好的Swagger UI体验,将解析逻辑内聚于Pydantic模型,代码更优雅,但需要Pydantic v2。客户端配合: 无论选择哪种策略,客户端在构建multipart/form-data请求时,都必须将复杂的JSON数据序列化为字符串,并作为表单字段发送。Pydantic的强大: Pydantic的Field(Query(…))和model_validator等功能为处理复杂数据结构提供了极大的灵活性和便利性。

选择哪种策略取决于您的具体项目需求和团队偏好。通过这些方法,您可以有效地构建出能够同时处理文件和复杂结构化数据的FastAPI服务,提升应用的健壮性和用户体验。

以上就是FastAPI高级实践:高效上传文件与复杂JSON数据(含列表和字典)的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1372549.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年12月14日 12:24:49
下一篇 2025年12月14日 12:25:05

相关推荐

  • python中如何将字典转换为JSON字符串_Python字典转JSON字符串操作

    将Python字典转换为JSON字符串需使用json.dumps()方法,可选indent、ensure_ascii等参数提升可读性或支持中文;若需写入文件,则用json.dump()并指定编码为utf-8以避免乱码;对于datetime、自定义对象等复杂类型,可通过default参数传入自定义序列…

    好文分享 2025年12月14日
    000
  • Llama Index自定义嵌入:深入理解查询与文本嵌入的异同

    在Llama Index中实现自定义嵌入时,_get_query_embedding() 和 _get_text_embedding() 是两个核心方法。虽然它们在 BaseEmbedding 基类中被定义为处理查询和文本,但其具体实现(例如在 InstructorEmbeddings 中)可能完全…

    2025年12月14日
    000
  • 正确使用@task.kubernetes()装饰器处理第三方与自定义依赖

    在使用Airflow的@task.kubernetes()装饰器时,为了确保任务能够正确执行并访问第三方库或自定义模块,核心策略是构建一个包含所有必要依赖的自定义Docker镜像,并将所有模块导入语句移动到Kubernetes任务函数内部。本文将详细指导如何创建定制镜像、配置Airflow DAG,…

    2025年12月14日
    000
  • 利用Python和Pandas生成混合型虚拟数据:数值与分类字段的正确实践

    本文详细介绍了如何使用Python、Pandas和NumPy高效生成包含数值和分类数据的虚拟数据集,特别针对在生成多行分类数据时常见的错误进行解析。通过示例代码,教程演示了如何正确利用列表推导式结合random.choice()为DataFrame的分类列生成随机且独立的字符串值,避免了仅生成单一重…

    2025年12月14日
    000
  • Python怎么使用正则表达式匹配_Python正则表达式使用教程

    Python中正则表达式通过re模块实现,可用于匹配、搜索、替换和验证文本模式;常用函数包括re.match()(从开头匹配)、re.search()(全局搜索)、re.findall()(查找所有匹配)、re.sub()(替换)和re.compile()(编译模式以提升效率);核心元字符如. ^ …

    2025年12月14日 好文分享
    000
  • Python怎么处理API返回的JSON数据_json模块解析API响应数据

    Python通过json模块将API返回的JSON数据解析为字典或列表,便于访问和操作。首先使用requests库发送HTTP请求并获取响应,调用response.json()自动解析JSON;若为JSON字符串,则用json.loads()转换。处理时需注意错误捕获、键是否存在及数据类型验证。对于…

    2025年12月14日
    000
  • 使用 Gensim 加载和处理 GloVe 词向量

    本文旨在帮助读者理解如何使用 Gensim 库加载和处理 GloVe 词向量,并探讨优化加载速度的多种方法。通过本文,你将学会直接加载 GloVe 格式的向量,以及如何将其保存为 Gensim 自身的格式,从而提升加载效率,特别是在需要频繁加载词向量的场景下。 直接加载 GloVe 词向量 Gens…

    2025年12月14日
    000
  • Python 文件操作中的异常捕获案例

    异常捕获是Python文件操作的必备环节,用于防止程序因文件不存在、权限不足等问题崩溃。通过try-except-finally或with open()机制可优雅处理异常,其中with语句能自动管理资源,确保文件正确关闭。常见异常包括FileNotFoundError、PermissionError…

    2025年12月14日
    000
  • Python 类中的封装思想

    封装是将数据和方法打包并隐藏内部实现,通过命名约定(如_和__)及property装饰器控制访问,提升代码安全性和可维护性。 Python类中的封装,简单来说,就是把数据和操作数据的方法打包在一起,就像一个黑盒子,你只需要知道怎么用,不需要知道里面是怎么实现的。 封装的核心目的是信息隐藏和数据保护。…

    2025年12月14日
    000
  • 掌握WooCommerce API v3:产品评论与自定义元数据处理

    本教程深入探讨使用WooCommerce API v3管理产品评论时,关于自定义元数据(meta_data)的常见误区。我们将揭示API对评论元数据的支持现状,并指导开发者如何正确地通过API创建产品评论,同时理解其限制。 理解WooCommerce API与产品评论 woocommerce res…

    2025年12月14日
    000
  • WooCommerce API v3 产品评论:自定义元数据添加限制与解析

    本文旨在深入探讨使用 WooCommerce API v3 添加产品评论时,自定义元数据(meta_data)字段不受支持的限制。通过分析常见编程误区和官方文档,我们将明确此接口的设计原理,并提供正确的 API 调用示例及针对自定义数据存储的替代方案,帮助开发者避免潜在问题,更高效地集成 WooCo…

    2025年12月14日
    000
  • Python高效获取动态黄金价格数据:API调用实践

    本教程旨在解决使用Python爬取动态加载的黄金价格数据时遇到的常见问题。传统网页抓取方法(如requests结合BeautifulSoup)在面对JavaScript动态渲染的内容时往往失效。文章核心在于揭示goldprice.org等网站通过AJAX API提供实时数据,并详细指导如何直接调用这…

    2025年12月14日
    000
  • Llama Index自定义嵌入:深度解析查询与文本嵌入方法的异同

    Llama Index的BaseEmbedding基类定义了_get_query_embedding和_get_text_embedding两种核心方法,用于分别处理查询和文档文本。虽然在InstructorEmbeddings的实现中它们可能看似相同,但其设计旨在允许不同嵌入模型根据自身特性,如通…

    2025年12月14日
    000
  • 保存带有不同元数据的TIFF堆栈

    本文档介绍了如何使用 tifffile 库将显微镜图像的NumPy数组保存为多层TIFF文件,并为每一层添加特定的元数据。重点在于如何正确地为每一张切片设置不同的描述信息,以及如何使用 OME-TIFF 格式存储更丰富的显微镜图像元数据,包括像素大小和Z轴位置等信息。 使用 tifffile 库保存…

    2025年12月14日
    000
  • 解决Django迁移中’表已存在’错误:深入解析与实践

    本文旨在解决Django项目中常见的OperationalError: Table ‘…’ already exists迁移错误。当数据库中表已存在但Django迁移记录缺失时,该错误会发生。教程将详细指导如何通过操作django_migrations表来同步数据…

    2025年12月14日
    000
  • Python 如何优雅地终止程序运行

    优雅退出程序需确保资源释放并返回状态码,使用sys.exit()或raise SystemExit可退出,前者为函数调用,后者抛异常可被捕获处理;通过try…finally块保证文件、连接等资源释放;多线程中用标志位通知线程停止并join等待结束;通过signal模块捕获SIGINT/S…

    2025年12月14日
    000
  • python flask如何返回json数据_flask框架返回json格式响应的方法

    Flask中返回JSON数据首选jsonify函数,它自动设置Content-Type并转换Python对象为JSON格式;支持字典、列表等可序列化类型,建议始终返回字典结构以避免字符串被转为数组;可通过返回元组或使用make_response设置自定义状态码;处理如datetime等非序列化对象时…

    2025年12月14日
    000
  • 使用 Node.js 连接 LDAP 进行 NTLM 身份验证

    本文档介绍了如何在 Node.js 中使用 LDAP 协议结合 NTLM 身份验证,通过服务账号绑定和用户DN检索的方式实现用户登录验证。文章将详细阐述连接 LDAP 服务器、搜索用户 DN 以及验证用户密码的步骤,并提供相应的代码示例,帮助开发者理解并实现基于 LDAP 的用户身份验证功能。 在 …

    2025年12月14日
    000
  • 使用 Python 和 Selenium 自动化 WhatsApp 消息发送

    本文介绍了如何使用 Python 和 Selenium 库自动化 WhatsApp 消息的发送。通过模拟用户在浏览器中的操作,可以实现向指定联系人发送消息的功能。文章提供了详细的代码示例,并强调了使用自动化工具可能存在的法律和伦理风险,以及需要注意的事项。 请注意,使用此方法可能违反 WhatsAp…

    2025年12月14日
    000
  • 使用 Python 通过 WhatsApp API 发送消息:自动化教程

    本文档介绍如何使用 Python 和 Selenium 库自动化 WhatsApp 消息的发送。该方法通过模拟用户在浏览器中的操作来实现,因此需要注意遵守 WhatsApp 的服务条款。本文提供详细的代码示例和步骤,帮助你了解如何设置环境、编写脚本以及发送消息。请务必谨慎使用,并确保你的行为符合相关…

    2025年12月14日
    000

发表回复

登录后才能评论
关注微信