首页 / NODEJS / Node.js Buffer用法解读

Node.js Buffer用法解读

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了Node.js Buffer用法解读，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含7174字，纯文字阅读大概需要11分钟。

内容图文

Buffer是什么？

Buffer作为存在于全局对象上，无需引入模块即可使用，你绝对不可以忽略它。

可以理解Buffer是在内存中开辟的一片区域，用于存放二进制数据。Buffer所开辟的是堆外内存。

Buffer的应用场景有哪些？

流

怎么理解流呢？流是数据的集合（与数据、字符串类似），但是流的数据不能一次性获取到，数据也不会全部load到内存中，因此流非常适合大数据处理以及断断续续返回chunk的外部源。流的生产者与消费者之间的速度通常是不一致的，因此需要buffer来暂存一些数据。buffer大小通过highWaterMark参数指定，默认情况下是16Kb。

存储需要占用大量内存的数据

Buffer 对象占用的内存空间是不计算在 Node.js 进程内存空间限制上的，所以可以用来存储大对象，但是对象的大小还是有限制的。一般情况下32位系统大约是1G，64位系统大约是2G。

如何创建Buffer

除了流自动隐式创建Buffer之外，也可以手动创建Buffer，方式如下：

Buffer中存储的数据已确定

Buffer.from(obj) // obj支持的类型string, buffer, arrayBuffer, array, or array-like object

注意：Buffer.from不支持传入数字，如下所示：

Buffer.from(1234);

buffer.js:208
  throw new errors.TypeError(
  ^

TypeError [ERR_INVALID_ARG_TYPE]: The "value" argument must not be of type number. Received type number
  at Function.from (buffer.js:208:11)
  ...

若要传入数字可以采用传入数组的方式：

const buf = Buffer.from([1, 2, 3, 4]);
console.log(buf); // <Buffer 01 02 03 04>

但是这种方式存在一个问题，当存入不同的数值的时候buffer中记录的二进制数据会相同，如下所示：

const buf2 = Buffer.from([127, -1]);
console.log(buf2);   // <Buffer 7f ff>

const buf3 = Buffer.from([127, 255]);
console.log(buf3);  // <Buffer 7f ff>

console.log(buf3.equals(buf2)); // true

当要记录的一组数全部落在0到255（readUInt8来读取）这个范围, 或者全部落在-128到127（readInt8来读取）这个范围那么就没有问题，否则的话就强烈不推荐使用Buffer.from来保存一组数。因为不同的数字读取时应该调用不同的方法。

Buffer存储数据未确定

Buffer.alloc、Buffer.allocUnsafe、Buffer.allocUnsafeSlow

Buffer.alloc会用0值填充已分配的内存，所以相比后两者速度上要慢，但是也较为安全。当然也可以通过--zero-fill-buffers flag使allocUnsafe、allocUnsafeSlow在分配完内存后也进行0值填充。

node --zero-fill-buffers index.js

当分配的空间小于4KB的时候，allocUnsafe会直接从之前预分配的Buffer里面slice空间，因此速度比allocUnsafeSlow要快，当大于等于4KB的时候二者速度相差无异。

// 分配空间等于4KB
function createBuffer(fn, size) {
 console.time('buf-' + fn);
 for (var i = 0; i < 100000; i++) {
  Buffer[fn](size);
 }
 console.timeEnd('buf-' + fn);
}
createBuffer('alloc', 4096);
createBuffer('allocUnsafe', 4096);
createBuffer('allocUnsafeSlow', 4096);

//

输出 buf-alloc: 294.002ms buf-allocUnsafe: 224.072ms buf-allocUnsafeSlow: 209.22ms

function createBuffer(fn, size) {
 console.time('buf-' + fn);
 for (var i = 0; i < 100000; i++) {
  Buffer[fn](size);
 }
 console.timeEnd('buf-' + fn);
}
createBuffer('alloc', 4095);
createBuffer('allocUnsafe', 4095);
createBuffer('allocUnsafeSlow', 4095);
//

输出 buf-alloc: 296.965ms buf-allocUnsafe: 135.877ms buf-allocUnsafeSlow: 205.225ms

需要谨记一点：new Buffer(xxxx) 方式已经不推荐使用了

Buffer使用

buffer转字符串

const buf = Buffer.from('test');
console.log(buf.toString('utf8'));         // test
console.log(buf.toString('utf8', 0, 2));      // te

buffer转json

const buf = Buffer.from([0x1, 0x2, 0x3, 0x4, 0x5]);
console.log(buf.toJSON());  // { type: 'Buffer', data: [ 1, 2, 3, 4, 5 ] }

buffer裁剪，裁剪后返回的新的buffer与原buffer指向同一块内存

buf.slice([start[, end]])

start 起始位置
end 结束位置(不包含)

示例：

var buf1 = Buffer.from('test');
var buf2 = buf1.slice(1, 3).fill('xx');
console.log("buf2 content: " + buf2.toString()); // xx
console.log("buf1 content: " + buf1.toString()); // txxt

buffer拷贝，buffer与数组不同，buffer的长度一旦确定就不再变化，因此当拷贝的源buffer比目标buffer大时只会复制部分的值

buf.copy(target[, targetStart[, sourceStart[, sourceEnd]]])

示例：

var buf1 = Buffer.from('abcdefghijkl');
var buf2 = Buffer.from('ABCDEF');

buf1.copy(buf2, 1);
console.log(buf2.toString()); //Abcdef

buffer相等判断，比较的是二进制值

buf.equals(otherBuffer)

示例：

const buf1 = Buffer.from('ABC');
const buf2 = Buffer.from('414243', 'hex'); 
console.log(buf1.equals(buf2));  // true

除了equals之外，compare其实也可以用于判断是否相等（当结果为0则相等），不过compare更主要的作用是用于对数组内的buffer实例排序。

buffer是否包含特定值

buf.includes(value[, byteOffset][, encoding])
buf.indexOf(value[, byteOffset][, encoding])

示例：

const buf = Buffer.from('this is a buffer');
console.log(buf.includes('this')); // true
console.log(buf.indexOf('this')); // 0

写入读取数值

写入方法：

位数固定且超过1个字节的： write{Double| Float | Int16 | Int32| UInt16 | UInt32 }{BE|LE}(value, offset)

位数不固定的： write{Int | UInt}{BE | LE}(value, offset, bytelength) //此方法提供了更灵活的位数表示数据（比如3位、5位）

位数固定是1个字节的： write{Int8 | Unit8}(value, offset)

读取方法：

位数固定且超过1个字节的： read{Double| Float | Int16 | Int32 | UInt16 | UInt32 }{BE|LE}（offset)

位数不固定的： read{Int | UInt}{BE | LE}(offset, byteLength)

位数固定是1个字节的： read{Int8 | Unit8}(offset)

Double、Float、Int16、Int32、UInt16、UInt32既确定了表征数字的位数，也确定了是否包含负数，因此定义了不同的数据范围。同时由于表征数字的位数都超过8位，无法用一个字节来表示，因此就涉及到了计算机的字节序区分（大端字节序与小端字节序）

关于大端小端的区别可以这么理解：数值的高位在buffer的起始位置的是大端，数值的低位buffer的起始位置则是小端

const buf = Buffer.allocUnsafe(2);
buf.writeInt16BE(256, 0) 
console.log(buf);      // <Buffer 01 00> 
buf.writeInt16LE(256, 0)
console.log(buf);      // <Buffer 00 01>

http://tools.jb51.net/transcoding/hexconvert这里可以查看数值的不同进制之间的转换，如果是大端的话，则直接按顺序（0100）拼接16进制即可，如果是小端则需要调换一下顺序才是正确的表示方式。

buffer合并

Buffer.concat(list[, totalLength]) //totalLength不是必须的，如果不提供的话会为了计算totalLength会多一次遍历

const buf1 = Buffer.from('this is');
const buf2 = Buffer.from(' funny');
console.log(Buffer.concat([buf1, buf2], buf1.length + buf2.length));
// <Buffer 74 68 69 73 20 69 73 20 66 75 6e 6e 79>

清空buffer

清空buffer数据最快的办法是buffer.fill(0)

buffer模块与Buffer的关系

Buffer是全局global上的一个引用，指向的其实是buffer.Buffer

 const buffer = require('buffer');
 console.log(buffer.Buffer === Buffer); //true

buffer模块上还有其他一些属性和方法

const buffer = require('buffer');
console.log(buffer);
{ Buffer:
  { [Function: Buffer]
   poolSize: 8192,
   from: [Function: from],
   alloc: [Function: alloc],
   allocUnsafe: [Function: allocUnsafe],
   allocUnsafeSlow: [Function: allocUnsafeSlow],
   isBuffer: [Function: isBuffer],
   compare: [Function: compare],
   isEncoding: [Function: isEncoding],
   concat: [Function: concat],
   byteLength: [Function: byteLength],
   [Symbol(node.isEncoding)]: [Function: isEncoding] },
 SlowBuffer: [Function: SlowBuffer],
 transcode: [Function: transcode],
 INSPECT_MAX_BYTES: 50,
 kMaxLength: 2147483647,
 kStringMaxLength: 1073741799,
 constants: { MAX_LENGTH: 2147483647, MAX_STRING_LENGTH: 1073741799 } }

上面的kMaxLength与MAX_LENGTH代表了新建buffer时内存大小的最大值，当超过限制值后就会报错

32为机器上是(2^30)-1(~1GB)

64位机器上是(2^31)-1(~2GB)

Buffer释放

我们无法手动对buffer实例进行GC，只能依靠V8来进行，我们唯一能做的就是解除对buffer实例的引用

参考资料

http://cenalulu.github.io/linux/character-encoding/
//www.gxlcms.com/article/31045.htm
http://edu.jb51.net/nodejs/nodejs-buffer.html

以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持脚本之家。

内容总结

以上是互联网集市为您收集整理的Node.js Buffer用法解读全部内容，希望文章能够帮你解决Node.js Buffer用法解读所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/337197.html

来源：【匿名】

【上一篇】完美解决linux下node.js全局模块找不到的情况【下一篇】node.js和php的区别有哪些？

更多 ►

【Node.js Buffer用法解读】教程文章相关的互联网学习教程文章

理解 nodeJS 中的 buffer，stream【代码】

在Node.js开发中，当遇到 buffer，stream，和二进制数据处理时，你是否像我一样，总是感到困惑？这种感觉是否会让你认为不了解它们，以为它们不适合你，认为而这些是Node.js作者们的事情？确实，这些东西可能非常令人生畏，尤其是当你在缺乏计算机底层基础知识，进行相关的开发。可悲的是，许多教程和书籍直接告诉你如何使用 Node.js 包开发 Web 应用程序，而没有让你了解 Node.js 的核心功能以及它们存在的原因，有些人会地告诉你...

在NodeJS中玩转Protocol Buffer【代码】【图】

Protocol Buffer入门教程Protocol Buffer是个什么鬼NodeJS开发者为何要跟Protocol Buffer打交道在NodeJS中实践Protocol Buffer协议选择支持protobuf的NodeJS第三方模块一个栗子书写proto文件编译 proto 文件编写 Writer编写Reader运行结果再举一个栗子编写proto编写client书写server运行结果其他高级特性嵌套MessageImport Message总结一下优点简洁快缺点参考文档Protocol Buffer入门教程Protocol Buffer是个什么鬼？Protocol Buff...

node.js Buffer类（二进制数据处理模块）【图】

Buffer类概述一个用于更好的操作二进制数据的类我们在操作文件或者网络数据的时候，其实操作的就是二进制数据流Node为我们提供了一个更加方便的去操作这种数据流的类 Buffer，他是一个全局的类，不需要引入后才能使用，可以直接使用 Buffer类的构造方法new Buffer(size)分配一个新的buffer大小是size的8位字节，参数size是一个Number类型的（类似数组的长度），一个长度表示1个字节创建一个Buffer对象，并为这个对象分配一个大小...

[Node.js]Buffer【代码】【图】

摘要在js中是没有二进制类型的，但在处理tcp或者文件流时，必须使用到二进制数据，因此Node.js定义了一个Buffer类型，该类型用来创建一个专门存储二进制数据的缓存区。在Node.js中，Buffer类是随Node内核一起发布的核心库。Buffer库为Node.js带来了一种存储原始数据的办法，可以让Node.js处理二进制数据，每当需要在Node.js中处理I/O操作中移动的数据时，就有可能使用Buffer库。原始数据存储在Buffer类的实例中。一个Buffer类似于证...

NodeJS中Buffer模块详解【图】

一，开篇分析所谓缓冲区Buffer，就是 "临时存贮区" 的意思，是暂时存放输入输出数据的一段内存。 JS语言自身只有字符串数据类型，没有二进制数据类型，因此NodeJS提供了一个与String对等的全局构造函数Buffer来提供对二进制数据的操作。除了可以读取文件得到Buffer的实例外，还能够直接构造，例如：代码如下:var buffer = new Buffer([ 0x68, 0x65, 0x6c, 0x6c, 0x6f ]) ; Buffer与字符串类似，除了可以用.length属性得到字节长度...

javascript – Node.js Stream – Buffer to String给出[object Object]【代码】

我希望能够过滤输出.但是,我遇到从缓冲区转换为字符串的问题.的console.log(JSON.stringify(obj.toString()));继续给我[对象]我不能使用.如何将缓冲区转换为字符串,以便我可以将内容过滤到stdout？//inject 'bower and javascript' files or just 'javascript' files function injectStream(sourceStream, filesStream) {sourceStream.pipe(injector(filesStream, { ignorePath: 'app', addRootSlash: false })).pipe(gulp.dest(IN...

node.js中的buffer.length方法使用说明_node.js

方法说明：该方法将返回buffer对象的长度。语法：代码如下: buffer.length接收参数：无例子：代码如下: buf = new Buffer(1234); console.log(buf.length); buf.write("some string", 0, "ascii"); console.log(buf.length); // 1234 // 1234

Node.js实用代码段之正确拼接Buffer_node.js【图】

对于初学Node.js框架的开发人员来说，可能认为Buffer模块比较易学、重要性也不是那么突出。其实，Buffer模块在文件I/O和网络I/O中应用非常广泛，其处理二进制的性能比普通字符串性能要高出很多，重要性可谓是举足轻重。下面我们通过一个例程向读者演示一下，使用buf.concat()方法进行拼接的过程。本例ch04.buffer-concat.js主要代码如下：/** * ch04.buffer-concat.js */ console.info("------ Buffer concat vs String concat ...

Node.js实用代码段之获取Buffer对象字节长度【图】

我们知道Node.js框架下的Buffer对象能够对二进制数据提供很好的支持，那么获取一个Buffer对象真实的字节长度则是必须要用到的功能了。Node.js框架为开发人员提供了一个Buffer.byteLength()方法，下面我们借助一个官方文档提供的例程向读者演示一下该方法的使用过程。本例ch04.buffer-byteLength.js主要代码如下：/*** ch04.buffer-byteLength.js*/console.info("------Buffer.byteLength()------");console.info();str = \u00bd +...

node.js中的buffer.fill方法使用说明_node.js

方法说明：将制定数据填充到buffer中。语法：代码如下: buffer.fill(value, [offset], [end])接收参数： value 将要填充的数据 offet 填充数据的开始位置，不指定默认为 0 end 填充数据的结束位置，不指定默认为 buffer 的长度。例子：代码如下: //例子1中，不指定填充内容的起止位置 var b = new Buffer(50); b.fill("h"); //例子2中，指定了填充内容的起止位置 var b = new Buffer(50); var ...

node.js中的buffer.Buffer.isBuffer方法使用说明

方法说明：检测目标是否为buffer对象。将返回true 或 false。语法：代码如下: Buffer.isBuffer(obj)接收参数： obj 被检测的对象。例子：代码如下: var b = new Buffer(50); var c = b.toString(base64,0,10); var d = Buffer.isEncoding(base64); var e = Buffer.isBuffer(b); console.log(d); //返回false console.log(e); //返回true源码：代码如下: // Static methods Buffer...

node.js中的buffer.copy方法使用说明_node.js

方法说明：进行不同buffer之间的复制替换操作。从源buffer复制数据并替换到目标buffer的指定位置。语法：代码如下: buffer.copy(targetBuffer, [targetStart], [sourceStart], [sourceEnd])接收参数： targetBuffer 目标buffer，执行复制替换的buffer targetStart 目标buffer数据替换的起始位置 sourceStart 源buffer数据复制的起始位置 sourceEnd 源buffer数据复制的结束位置例子：在该...

Nodejs 简述Buffer的使用，包含多重创建方式、实例方法及静态方法

Buffer 是用来处理缓冲区的专用API，用于创建缓冲区，操作缓冲区数据的场景。主要用于操作二进制数据流，其用法与数组非常相似。在 Nodejs 中处理二进制流就需要用到 Buffer。Buffer 实例一般用于表示编码字符的序列，比如 UTF-8 、 UCS2 、 Base64 、或十六进制编码的数据。通过使用显式的字符编码，就可以在 Buffer 实例与普通的 JavaScript 字符串之间进行相互转换。一、创建方式： new Buffer(size) 创建一个指定大小的buffer...

Node.js Buffer(缓冲区)【代码】

JavaScript 语言自身只有字符串数据类型，没有二进制数据类型。但在处理像TCP流或文件流时，必须使用到二进制数据。因此在 Node.js中，定义了一个 Buffer 类，该类用来创建一个专门存放二进制数据的缓存区。在 Node.js 中，Buffer 类是随 Node 内核一起发布的核心库。Buffer 库为 Node.js 带来了一种存储原始数据的方法，可以让 Node.js 处理二进制数据，每当需要在 Node.js 中处理I/O操作中移动的数据时，就有可能使用 Buffer 库。...

node.js中的buffer.toJSON方法使用说明_node.js

方法说明：将buffer对象转换成json格式。语法：代码如下: buffer.toJSON()接收参数：无例子：代码如下: var buf = new Buffer(test); var json = JSON.stringify(buf); console.log(json); // {"type":"Buffer","data":[116,101,115,116]} var copy = JSON.parse(json, function(key, value) {return value && value.type === Buffer? new Buffer(value.data): value;}); console.log(copy); // 源码：代码如下: Buffer.proto...

NODEJS - 技术教程分类

Node.js 教程 Node.js 安装配置 Node.js 创建第一个应用 NPM 使用介绍 Node.js REPL Node.js 回调函数 Node.js 事件循环 Node.js EventEmitter Node.js Buffer Node.js Stream Node.js 模块系统 Node.js 函数 Node.js 路由 Node.js 全局对象 Node.js 常用工具 Node.js 文件系统 Node.js GET/POST请求 Node.js 工具模块 Node.js Web 模块 Node.js Express 框架 Node.js RESTful API Node.js 多进程 Node.js JXcore 打包 Node.js MySQL Node.js MongoDB nodejs 全部

NODEJS - 最热教程

Node.js Error: Cannot find module ex...如何使用node.js实现获取微信用户授权（...node.js中的npmupdate如何使用 nodejsnpm包管理的配置方法及常用命令介...node.js+Ajax实现获取HTTP服务器返回数...nodejs调用cmd命令实现复制目录_node.j...快速搭建Node.js(Express)用户注册、登...nodejs入门教程五：连接数据库的方法分...nodejs中自动启用服务==类似于前端的热...14款NodeJS Web框架推荐

首页 / NODEJS / Node.js Buffer用法解读

Node.js Buffer用法解读

内容导读

内容图文

内容总结

内容备注

内容手机端

【Node.js Buffer用法解读】教程文章相关的互联网学习教程文章

NODEJS - 技术教程分类

NODEJS - 最新教程

NODEJS - 最热教程