使用json.Decoder可高效流式解码大型或流式JSON数据,适用于标准输入、文件和HTTP响应场景,通过decoder.More()判断数据是否继续,逐个解析对象以降低内存占用。

在处理大型 JSON 数据或从网络流、文件流中读取 JSON 时,使用 json.Decoder 进行流式解码比一次性加载整个 JSON 更高效。Go 的 encoding/json 包提供了 json.NewDecoder 函数,可以从任何实现了 io.Reader 接口的源进行逐步解码。
基本用法:从标准输入流式解码 JSON
下面示例演示如何从 os.Stdin 持续读取 JSON 对象,适用于逐个处理 JSON 记录的场景(如日志流):
package mainimport ( "encoding/json" "log" "os")type Person struct { Name string `json:"name"` Age int `json:"age"`}func main() { decoder := json.NewDecoder(os.Stdin) for { var person Person // 流式读取每一个 JSON 对象 if err := decoder.Decode(&person); err != nil { log.Println("解码结束或出错:", err) break } log.Printf("接收到: %+vn", person) }}
运行程序后,可以输入多个 JSON 对象(每行一个):
{"name": "Alice", "age": 30}{"name": "Bob", "age": 25}
每输入一行,程序就会立即解码并输出一条日志。
立即学习“go语言免费学习笔记(深入)”;
从文件中流式读取 JSON 数组
当 JSON 文件包含一个大数组时,避免将整个数组加载到内存。可以通过解码器逐个读取数组元素:
package mainimport ( "encoding/json" "log" "os")func main() { file, err := os.Open("data.json") if err != nil { log.Fatal("无法打开文件:", err) } defer file.Close() decoder := json.NewDecoder(file) // 先读取数组起始符号 [ if _, err := decoder.Token(); err != nil { log.Fatal("读取起始符失败:", err) } var count int for decoder.More() { var person Person if err := decoder.Decode(&person); err != nil { log.Println("解码对象失败:", err) continue } count++ log.Printf("第 %d 个: %+v", count, person) } // 读取数组结束符号 ] if _, err := decoder.Token(); err != nil { log.Fatal("读取结束符失败:", err) }}
对应的 data.json 文件内容:
[ {"name": "Alice", "age": 30}, {"name": "Bob", "age": 25}, {"name": "Charlie", "age": 35}]
从 HTTP 响应流式解码
在处理来自 API 的大型 JSON 响应时,可以直接从 http.Response.Body 流式解码:
resp, err := http.Get("https://api.example.com/large-stream")if err != nil { log.Fatal("请求失败:", err)}defer resp.Body.Close()decoder := json.NewDecoder(resp.Body)for decoder.More() { var item map[string]interface{} if err := decoder.Decode(&item); err != nil { log.Println("解码响应项失败:", err) break } // 处理每个 item log.Println("收到数据:", item)}
使用 json.Decoder 能有效降低内存占用,特别适合处理未知大小或持续不断的 JSON 数据流。关键是通过 decoder.More() 判断是否还有更多数据,并配合结构体或接口类型灵活解析。
基本上就这些。根据数据源选择合适的 Reader,就能实现高效稳定的流式解码。
以上就是Golang jsonDecoder流式解码操作示例的详细内容,更多请关注创想鸟其它相关文章!
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1409544.html
微信扫一扫
支付宝扫一扫