天天看点

Node.js Buffer(缓冲区)

JavaScript 语言自身只有字符串数据类型,没有二进制数据类型。

但在处理像TCP流或文件流时,必须使用到二进制数据。因此在 Node.js中,定义了一个 Buffer 类,该类用来创建一个专门存放二进制数据的缓存区。

在 Node.js 中,Buffer 类是随 Node 内核一起发布的核心库。Buffer 库为 Node.js 带来了一种存储原始数据的方法,可以让 Node.js 处理二进制数据,每当需要在 Node.js 中处理I/O操作中移动的数据时,就有可能使用 Buffer 库。原始数据存储在 Buffer 类的实例中。一个 Buffer 类似于一个整数数组,但它对应于 V8 堆内存之外的一块原始内存。

在v6.0之前创建Buffer对象直接使用new Buffer()构造函数来创建对象实例,但是Buffer对内存的权限操作相比很大,可以直接捕获一些敏感信息,所以在v6.0以后,官方文档里面建议使用 Buffer.from() 接口去创建Buffer对象。

Buffer 实例一般用于表示编码字符的序列,比如 UTF-8 、 UCS2 、 Base64 、或十六进制编码的数据。 通过使用显式的字符编码,就可以在 Buffer 实例与普通的 JavaScript 字符串之间进行相互转换。

Node.js 目前支持的字符编码包括:

<b>ascii</b> - 仅支持 7 位 ASCII 数据。如果设置去掉高位的话,这种编码是非常快的。

<b>utf8</b> - 多字节编码的 Unicode 字符。许多网页和其他文档格式都使用 UTF-8 。

<b>utf16le</b> - 2 或 4 个字节,小字节序编码的 Unicode 字符。支持代理对(U+10000 至 U+10FFFF)。

<b>ucs2</b> - <b>utf16le</b> 的别名。

<b>base64</b> - Base64 编码。

<b>latin1</b> - 一种把 <b>Buffer</b> 编码成一字节编码的字符串的方式。

<b>binary</b> - <b>latin1</b> 的别名。

<b>hex</b> - 将每个字节编码为两个十六进制字符。

Buffer 提供了以下 API 来创建 Buffer 类:

<b>Buffer.alloc(size[, fill[, encoding]]):</b> 返回一个指定大小的 Buffer 实例,如果没有设置 fill,则默认填满 0

<b>Buffer.allocUnsafe(size):</b> 返回一个指定大小的 Buffer 实例,但是它不会被初始化,所以它可能包含敏感的数据

<b>Buffer.allocUnsafeSlow(size)</b>

<b>Buffer.from(array):</b> 返回一个被 array 的值初始化的新的 Buffer 实例(传入的 array 的元素只能是数字,不然就会自动被 0 覆盖)

<b>Buffer.from(arrayBuffer[, byteOffset[, length]]):</b> 返回一个新建的与给定的 ArrayBuffer 共享同一内存的 Buffer。

<b>Buffer.from(buffer):</b> 复制传入的 Buffer 实例的数据,并返回一个新的 Buffer 实例

<b>Buffer.from(string[, encoding]):</b> 返回一个被 string 的值初始化的新的 Buffer 实例

写入 Node 缓冲区的语法如下所示:

参数描述如下:

<b>string</b> - 写入缓冲区的字符串。

<b>offset</b> - 缓冲区开始写入的索引值,默认为 0 。

<b>length</b> - 写入的字节数,默认为 buffer.length

<b>encoding</b> - 使用的编码。默认为 'utf8' 。

根据 encoding 的字符编码写入 string 到 buf 中的 offset 位置。 length 参数是写入的字节数。 如果 buf 没有足够的空间保存整个字符串,则只会写入 string 的一部分。 只部分解码的字符不会被写入。

返回实际写入的大小。如果 buffer 空间不足, 则只会写入部分字符串。

执行以上代码,输出结果为:

读取 Node 缓冲区数据的语法如下所示:

<b>start</b> - 指定开始读取的索引位置,默认为 0。

<b>end</b> - 结束位置,默认为缓冲区的末尾。

解码缓冲区数据并使用指定的编码返回字符串。

将 Node Buffer 转换为 JSON 对象的函数语法格式如下:

当字符串化一个 Buffer 实例时,JSON.stringify() 会隐式地调用该 toJSON()。

返回 JSON 对象。

Node 缓冲区合并的语法如下所示:

<b>list</b> - 用于合并的 Buffer 对象数组列表。

<b>totalLength</b> - 指定合并后Buffer对象的总长度。

返回一个多个成员合并的新 Buffer 对象。

Node Buffer 比较的函数语法如下所示, 该方法在 Node.js v0.12.2 版本引入:

<b>otherBuffer</b> - 与 <b>buf</b> 对象比较的另外一个 Buffer 对象。

返回一个数字,表示 <b>buf</b> 在 <b>otherBuffer</b> 之前,之后或相同。

Node 缓冲区拷贝语法如下所示:

<b>targetBuffer</b> - 要拷贝的 Buffer 对象。

<b>targetStart</b> - 数字, 可选, 默认: 0

<b>sourceStart</b> - 数字, 可选, 默认: 0

<b>sourceEnd</b> - 数字, 可选, 默认: buffer.length

没有返回值。

Node 缓冲区裁剪语法如下所示:

<b>start</b> - 数字, 可选, 默认: 0

<b>end</b> - 数字, 可选, 默认: buffer.length

返回一个新的缓冲区,它和旧缓冲区指向同一块内存,但是从索引 start 到 end 的位置剪切。

Node 缓冲区长度计算语法如下所示:

返回 Buffer 对象所占据的内存长度。

以下列出了 Node.js Buffer 模块常用的方法(注意有些方法在旧版本是没有的):

序号

方法 &amp; 描述

1

<b>new Buffer(size)</b>

分配一个新的 size 大小单位为8位字节的 buffer。 注意, size 必须小于 kMaxLength,否则,将会抛出异常 RangeError。废弃的: 使用 Buffer.alloc() 代替(或 Buffer.allocUnsafe())。

2

<b>new Buffer(buffer)</b>

拷贝参数 buffer 的数据到 Buffer 实例。废弃的: 使用 Buffer.from(buffer) 代替。

3

<b>new Buffer(str[, encoding])</b>

分配一个新的 buffer ,其中包含着传入的 str 字符串。 encoding 编码方式默认为 'utf8'。

废弃的: 使用 Buffer.from(string[, encoding]) 代替。

4

<b>buf.length</b>

返回这个 buffer 的 bytes 数。注意这未必是 buffer 里面内容的大小。length 是 buffer 对象所分配的内存数,它不会随着这个 buffer 对象内容的改变而改变。

5

<b>buf.write(string[, offset[, length]][, encoding])</b>

根据参数 offset 偏移量和指定的 encoding 编码方式,将参数 string 数据写入buffer。 offset 偏移量默认值是 0, encoding 编码方式默认是 utf8。 length 长度是将要写入的字符串的 bytes 大小。 返回 number 类型,表示写入了多少 8 位字节流。如果 buffer 没有足够的空间来放整个 string,它将只会只写入部分字符串。 length 默认是 buffer.length - offset。 这个方法不会出现写入部分字符。

6

<b>buf.writeUIntLE(value, offset, byteLength[, noAssert])</b>

将 value 写入到 buffer 里, 它由 offset 和 byteLength 决定,最高支持 48 位无符号整数,小端对齐,例如:

noAssert 值为 true 时,不再验证 value 和 offset 的有效性。 默认是 false。

7

<b>buf.writeUIntBE(value, offset, byteLength[, noAssert])</b>

将 value 写入到 buffer 里, 它由 offset 和 byteLength 决定,最高支持 48 位无符号整数,大端对齐。noAssert 值为 true 时,不再验证 value 和 offset 的有效性。 默认是 false。

8

<b>buf.writeIntLE(value, offset, byteLength[, noAssert])</b>

将value 写入到 buffer 里, 它由offset 和 byteLength 决定,最高支持48位有符号整数,小端对齐。noAssert 值为 true 时,不再验证 value 和 offset 的有效性。 默认是 false。

9

<b>buf.writeIntBE(value, offset, byteLength[, noAssert])</b>

将value 写入到 buffer 里, 它由offset 和 byteLength 决定,最高支持48位有符号整数,大端对齐。noAssert 值为 true 时,不再验证 value 和 offset 的有效性。 默认是 false。

10

<b>buf.readUIntLE(offset, byteLength[, noAssert])</b>

支持读取 48 位以下的无符号数字,小端对齐。noAssert 值为 true 时, offset 不再验证是否超过 buffer 的长度,默认为 false。

11

<b>buf.readUIntBE(offset, byteLength[, noAssert])</b>

支持读取 48 位以下的无符号数字,大端对齐。noAssert 值为 true 时, offset 不再验证是否超过 buffer 的长度,默认为 false。

12

<b>buf.readIntLE(offset, byteLength[, noAssert])</b>

支持读取 48 位以下的有符号数字,小端对齐。noAssert 值为 true 时, offset 不再验证是否超过 buffer 的长度,默认为 false。

13

<b>buf.readIntBE(offset, byteLength[, noAssert])</b>

支持读取 48 位以下的有符号数字,大端对齐。noAssert 值为 true 时, offset 不再验证是否超过 buffer 的长度,默认为 false。

14

<b>buf.toString([encoding[, start[, end]]])</b>

根据 encoding 参数(默认是 'utf8')返回一个解码过的 string 类型。还会根据传入的参数 start (默认是 0) 和 end (默认是 buffer.length)作为取值范围。

15

<b>buf.toJSON()</b>

将 Buffer 实例转换为 JSON 对象。

16

<b>buf[index]</b>

获取或设置指定的字节。返回值代表一个字节,所以返回值的合法范围是十六进制0x00到0xFF 或者十进制0至 255。

17

<b>buf.equals(otherBuffer)</b>

比较两个缓冲区是否相等,如果是返回 true,否则返回 false。

18

<b>buf.compare(otherBuffer)</b>

比较两个 Buffer 对象,返回一个数字,表示 buf 在 otherBuffer 之前,之后或相同。

19

<b>buf.copy(targetBuffer[, targetStart[, sourceStart[, sourceEnd]]])</b>

buffer 拷贝,源和目标可以相同。 targetStart 目标开始偏移和 sourceStart 源开始偏移默认都是 0。 sourceEnd 源结束位置偏移默认是源的长度 buffer.length 。

20

<b>buf.slice([start[, end]])</b>

剪切 Buffer 对象,根据 start(默认是 0 ) 和 end (默认是 buffer.length ) 偏移和裁剪了索引。 负的索引是从 buffer 尾部开始计算的。

21

<b>buf.readUInt8(offset[, noAssert])</b>

根据指定的偏移量,读取一个无符号 8 位整数。若参数 noAssert 为 true 将不会验证 offset 偏移量参数。 如果这样 offset 可能会超出buffer 的末尾。默认是 false。

22

<b>buf.readUInt16LE(offset[, noAssert])</b>

根据指定的偏移量,使用特殊的 endian 字节序格式读取一个无符号 16 位整数。若参数 noAssert 为 true 将不会验证 offset 偏移量参数。 这意味着 offset 可能会超出 buffer 的末尾。默认是 false。

23

<b>buf.readUInt16BE(offset[, noAssert])</b>

根据指定的偏移量,使用特殊的 endian 字节序格式读取一个无符号 16 位整数,大端对齐。若参数 noAssert 为 true 将不会验证 offset 偏移量参数。 这意味着 offset 可能会超出 buffer 的末尾。默认是 false。

24

<b>buf.readUInt32LE(offset[, noAssert])</b>

根据指定的偏移量,使用指定的 endian 字节序格式读取一个无符号 32 位整数,小端对齐。

若参数 noAssert 为 true 将不会验证 offset 偏移量参数。 这意味着 offset 可能会超出buffer 的末尾。默认是 false。

25

<b>buf.readUInt32BE(offset[, noAssert])</b>

根据指定的偏移量,使用指定的 endian 字节序格式读取一个无符号 32 位整数,大端对齐。

26

<b>buf.readInt8(offset[, noAssert])</b>

根据指定的偏移量,读取一个有符号 8 位整数。

若参数 noAssert 为 true 将不会验证 offset 偏移量参数。 这意味着 offset 可能会超出 buffer 的末尾。默认是 false。

27

<b>buf.readInt16LE(offset[, noAssert])</b>

根据指定的偏移量,使用特殊的 endian 格式读取一个 有符号 16 位整数,小端对齐。

28

<b>buf.readInt16BE(offset[, noAssert])</b>

根据指定的偏移量,使用特殊的 endian 格式读取一个 有符号 16 位整数,大端对齐。

29

<b>buf.readInt32LE(offset[, noAssert])</b>

根据指定的偏移量,使用指定的 endian 字节序格式读取一个有符号 32 位整数,小端对齐。

30

<b>buf.readInt32BE(offset[, noAssert])</b>

根据指定的偏移量,使用指定的 endian 字节序格式读取一个有符号 32 位整数,大端对齐。

31

<b>buf.readFloatLE(offset[, noAssert])</b>

根据指定的偏移量,使用指定的 endian 字节序格式读取一个 32 位双浮点数,小端对齐。

若参数 noAssert 为 true 将不会验证 offset 偏移量参数。 这意味着 offset 可能会超出buffer的末尾。默认是 false。

32

<b>buf.readFloatBE(offset[, noAssert])</b>

根据指定的偏移量,使用指定的 endian 字节序格式读取一个 32 位双浮点数,大端对齐。

33

<b>buf.readDoubleLE(offset[, noAssert])</b>

根据指定的偏移量,使用指定的 endian字节序格式读取一个 64 位双精度数,小端对齐。

34

<b>buf.readDoubleBE(offset[, noAssert])</b>

根据指定的偏移量,使用指定的 endian字节序格式读取一个 64 位双精度数,大端对齐。

35

<b>buf.writeUInt8(value, offset[, noAssert])</b>

根据传入的 offset 偏移量将 value 写入 buffer。注意:value 必须是一个合法的无符号 8 位整数。

若参数 noAssert 为 true 将不会验证 offset 偏移量参数。 这意味着 value 可能过大,或者 offset 可能会超出 buffer 的末尾从而造成 value 被丢弃。 除非你对这个参数非常有把握,否则不要使用。默认是 false。

36

<b>buf.writeUInt16LE(value, offset[, noAssert])</b>

根据传入的 offset 偏移量和指定的 endian 格式将 value 写入 buffer。注意:value 必须是一个合法的无符号 16 位整数,小端对齐。

若参数 noAssert 为 true 将不会验证 value 和 offset 偏移量参数。 这意味着 value 可能过大,或者 offset 可能会超出buffer的末尾从而造成 value 被丢弃。 除非你对这个参数非常有把握,否则尽量不要使用。默认是 false。

37

<b>buf.writeUInt16BE(value, offset[, noAssert])</b>

根据传入的 offset 偏移量和指定的 endian 格式将 value 写入 buffer。注意:value 必须是一个合法的无符号 16 位整数,大端对齐。

38

<b>buf.writeUInt32LE(value, offset[, noAssert])</b>

根据传入的 offset 偏移量和指定的 endian 格式(LITTLE-ENDIAN:小字节序)将 value 写入buffer。注意:value 必须是一个合法的无符号 32 位整数,小端对齐。

若参数 noAssert 为 true 将不会验证 value 和 offset 偏移量参数。 这意味着value 可能过大,或者offset可能会超出buffer的末尾从而造成 value 被丢弃。 除非你对这个参数非常有把握,否则尽量不要使用。默认是 false。

39

<b>buf.writeUInt32BE(value, offset[, noAssert])</b>

根据传入的 offset 偏移量和指定的 endian 格式(Big-Endian:大字节序)将 value 写入buffer。注意:value 必须是一个合法的有符号 32 位整数。

若参数 noAssert 为 true 将不会验证 value 和 offset 偏移量参数。 这意味着 value 可能过大,或者offset可能会超出buffer的末尾从而造成 value 被丢弃。 除非你对这个参数非常有把握,否则尽量不要使用。默认是 false。

40

<b>buf.writeInt8(value, offset[, noAssert])</b>

41

<b>buf.writeInt16LE(value, offset[, noAssert])</b>

根据传入的 offset 偏移量和指定的 endian 格式将 value 写入 buffer。注意:value 必须是一个合法的 signed 16 位整数。

若参数 noAssert 为 true 将不会验证 value 和 offset 偏移量参数。 这意味着 value 可能过大,或者 offset 可能会超出 buffer 的末尾从而造成 value 被丢弃。 除非你对这个参数非常有把握,否则尽量不要使用。默认是 false 。

42

<b>buf.writeInt16BE(value, offset[, noAssert])</b>

43

<b>buf.writeInt32LE(value, offset[, noAssert])</b>

根据传入的 offset 偏移量和指定的 endian 格式将 value 写入 buffer。注意:value 必须是一个合法的 signed 32 位整数。

若参数 noAssert 为 true 将不会验证 value 和 offset 偏移量参数。 这意味着 value 可能过大,或者 offset 可能会超出 buffer 的末尾从而造成 value 被丢弃。 除非你对这个参数非常有把握,否则尽量不要使用。默认是 false。

44

<b>buf.writeInt32BE(value, offset[, noAssert])</b>

45

<b>buf.writeFloatLE(value, offset[, noAssert])</b>

根据传入的 offset 偏移量和指定的 endian 格式将 value 写入 buffer 。注意:当 value 不是一个 32 位浮点数类型的值时,结果将是不确定的。

若参数 noAssert 为 true 将不会验证 value 和 offset 偏移量参数。 这意味着 value可能过大,或者 offset 可能会超出 buffer 的末尾从而造成 value 被丢弃。 除非你对这个参数非常有把握,否则尽量不要使用。默认是 false。

46

<b>buf.writeFloatBE(value, offset[, noAssert])</b>

47

<b>buf.writeDoubleLE(value, offset[, noAssert])</b>

根据传入的 offset 偏移量和指定的 endian 格式将 value 写入 buffer。注意:value 必须是一个有效的 64 位double 类型的值。

若参数 noAssert 为 true 将不会验证 value 和 offset 偏移量参数。 这意味着 value 可能过大,或者 offset 可能会超出 buffer 的末尾从而造成value被丢弃。 除非你对这个参数非常有把握,否则尽量不要使用。默认是 false。

48

<b>buf.writeDoubleBE(value, offset[, noAssert])</b>

49

<b>buf.fill(value[, offset][, end])</b>

使用指定的 value 来填充这个 buffer。如果没有指定 offset (默认是 0) 并且 end (默认是 buffer.length) ,将会填充整个buffer。