
使用Flask框架构建类似ChatGPT的流式文本传输应用
许多开发者希望利用Flask框架创建类似ChatGPT的应用,实现文本内容的实时生成和传输。然而,Flask的response对象并非为这种场景设计,它会在生成器函数完全执行后才开始返回数据。本文将介绍如何使用Flask的stream_with_context函数解决此问题,并分析其工作原理。
问题示例:
以下代码片段演示了使用普通response对象时遇到的问题:
from time import sleepfrom flask import Flask, Responseapp = Flask(__name__)@app.route('/stream', methods=['GET'])def stream(): def generate(): for i in range(1, 21): print(i) yield f'this is item {i}n' sleep(0.5) return Response(generate(), mimetype='text/plain')if __name__ == '__main__': app.run(debug=True)
此代码中,Response对象会在generate()函数完全执行完毕后才开始返回数据,无法实现流式传输的效果。
正确实现:
为了实现真正的实时数据传输,我们需要使用stream_with_context函数:
from flask import stream_with_context, request, Response@app.route('/stream')def streamed_response(): def generate(): yield 'Hello ' yield request.args['name'] yield '!' return Response(stream_with_context(generate()), mimetype='text/plain')
stream_with_context装饰器确保每次迭代生成的数据都会立即发送给客户端,而不是等待所有数据生成完毕。 request.args['name']展示了如何从请求参数中获取数据并将其整合到流式响应中,实现了动态内容生成和实时反馈,从而模拟ChatGPT的实时交互效果,显著提升用户体验。
通过以上方法,我们可以构建更具响应性的应用,提供更流畅的用户体验。
以上就是Flask框架下如何实现ChatGPT式的流式文本传输?的详细内容,更多请关注创想鸟其它相关文章!
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1359435.html
微信扫一扫
支付宝扫一扫