Node.js中request包拉取HTML文本编码异常如何解决?

node.js中request包拉取html文本编码异常如何解决?

Node.js 使用request包获取HTML文本编码异常问题及解决方法

在使用Node.js的request包获取网页内容时,经常会遇到编码异常问题,导致输出结果为乱码。本文将分析此问题并提供解决方案。

问题现象

例如,使用以下代码获取网页:

立即学习“前端免费学习笔记(深入)”;

const request = require('request');function getHTML() {    request('https://www.58moto.com/used-car/1470264', (err, res, body) => {        console.log(body);    });}getHTML();

浏览器显示的网页内容为UTF-8编码,但request包输出的结果却是乱码,例如:�z 这是因为request包默认的编码方式与网页实际编码方式不一致导致的。

问题分析

此问题通常是因为request包默认使用系统默认编码(例如windows-1252)进行解码,而目标网页使用的是UTF-8编码。 两种编码方式不同,导致解码错误,输出乱码。

解决方案

推荐使用iconv-lite包来解决编码问题。 iconv-lite是一个轻量级的字符编码转换库,可以将不同编码的文本进行转换。 修改代码如下:

const request = require('request');const iconv = require('iconv-lite');function getHTML() {    request({        url: 'https://www.58moto.com/used-car/1470264',        encoding: null // 关键:设置encoding为null,防止request自动解码    }, (err, res, body) => {        let decodedBody = iconv.decode(body, 'utf-8'); // 使用iconv-lite解码为utf-8        console.log(decodedBody);    });}getHTML();

这段代码中,encoding: null 阻止了request自动解码,并将原始二进制数据传递给iconv.decode函数。iconv.decode(body, 'utf-8') 将二进制数据解码为UTF-8编码的字符串。 请确保已安装iconv-lite包:npm install iconv-lite

另一种更简洁的方案是直接使用axios包替代requestaxios默认使用UTF-8解码,无需额外处理编码问题。

选择以上任一方案都可以有效解决request包解码HTML文本编码异常的问题。 选择axios方案可以简化代码,提高开发效率。

以上就是Node.js中request包拉取HTML文本编码异常如何解决?的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1502255.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年12月20日 00:32:56
下一篇 2025年12月20日 00:33:09

相关推荐

发表回复

登录后才能评论
关注微信