JavaScript Streams API：让数据流动如呼吸般自然，告别内存溢出的噩梦！-平芜编程栈

你是否曾经在处理大文件时，因为内存溢出而崩溃？是否在处理网络请求时，不得不等待整个响应加载完成才能开始处理？当面对海量数据流时，是否感到束手无策？今天，我要向你揭示一个JavaScript的隐藏神器——Streams API，它将彻底改变你处理数据的方式，让数据流动如呼吸般自然，让你的代码优雅而高效。

为什么我们需要Streams API？

在Web开发中，我们经常需要处理大块数据。想象一下，当你从服务器下载一个1GB的视频文件，或者处理一个包含数百万条记录的CSV文件。如果一次性加载到内存，不仅会消耗大量内存，还可能导致页面卡顿甚至崩溃。

Streams API正是为了解决这个"大块数据如何分小块处理"的问题而生的。它允许我们以流式方式处理数据，让应用在数据到达时就能立即使用，而无需等待所有数据加载完毕。这就像从水龙头接水，而不是一次性灌满一个大水缸。

流的基本概念：块、队列与反压

在Streams API中，数据的基本单位是"块"（chunk）。块可以是单个字节，也可以是某种更大的数据类型，比如特定大小的类型化数组。流中的数据被按序读入到许多小的片段，这些片段就是块。

流内部有一个"内部队列"，用于跟踪尚未读取的块。当数据进入速度大于处理速度时，队列会不断增大。为了防止内存耗尽，流会使用"反压"（backpressure）机制通知数据源减慢速度，直到队列大小降到安全阈值以下。

可读流：数据的源头

可读流（ReadableStream）是一个数据源，表示数据从底层源流出。它在JavaScript中用ReadableStream对象表示。

常见属性与方法

start(controller): 流开始时的初始化逻辑
pull(controller): 用于拉取数据的回调
cancel(reason): 当流被取消时触发
getReader(): 获取一个读取器，用于读取流中的数据

实际应用示例

constreadableStream=newReadableStream({start(controller){// 模拟数据生成for(leti=0;i<10;i++){controller.enqueue(`数据块${i}`);// 每个块之间暂停100毫秒setTimeout(()=>{},100);}controller.close();}});constreader=readableStream.getReader();reader.read().then(({value,done})=>{if(!done){console.log(value);// 输出数据块returnreader.read();}});

重要特性：拷贝（Teeing）

一个流一次只能被一个reader读取，但我们可以使用tee()方法将流分成两个相同的副本，这样它们就可以用两个独立的reader读取。

const[stream1,stream2]=readableStream.tee();// stream1和stream2可以被两个独立的reader读取

可写流：数据的终点

可写流（WritableStream）是一个数据终点，表示数据可以写入到某个地方。它在JavaScript中用WritableStream对象表示。

常见属性与方法

start(controller): 流开始时的初始化逻辑
write(chunk, controller): 写入数据块时触发
close(controller): 流关闭时触发
abort(reason): 流被异常终止时触发
getWriter(): 获取一个写入器，用于向流中写入数据

实际应用示例

constwritableStream=newWritableStream({write(chunk){console.log("接收到数据块:",chunk);// 处理数据},close(){console.log("流已关闭");},abort(reason){console.error("流被中止:",reason);}});constwriter=writableStream.getWriter();writer.write("Hello, World!");writer.close();

转换流：数据的加工车间

转换流（TransformStream）由可写流和可读流组成，中间有转换程序。它允许我们在数据流入和流出时进行转换。

常见属性与方法

start(controller): 流开始时的初始化逻辑
transform(chunk, controller): 数据块被写入时触发，可以进行转换
flush(controller): 所有数据写入完成后触发

实际应用示例

consttransformStream=newTransformStream({transform(chunk,controller){// 将数据转换为大写controller.enqueue(chunk.toUpperCase());},flush(controller){// 所有数据处理完毕controller.terminate();}});// 使用转换流constreadableStream=newReadableStream({start(controller){for(leti=0;i<5;i++){controller.enqueue(`数据${i}`);}controller.close();}});constwritableStream=newWritableStream({write(chunk){console.log("转换后的数据:",chunk);}});// 连接流readableStream.pipeThrough(transformStream).pipeTo(writableStream);

流的管道连接：让数据流动起来

Streams API最强大的功能之一是能够通过管道连接流，形成数据处理流水线。

pipeThrough()：连接可读流到转换流

constintegerStream=newReadableStream({asyncstart(controller){for(leti=0;i<5;i++){awaitnewPromise(resolve=>setTimeout(resolve,1000));controller.enqueue(i);}controller.close();}});constdoublingStream=newTransformStream({transform(chunk,controller){controller.enqueue(chunk*2);}});constpipedStream=integerStream.pipeThrough(doublingStream);

pipeTo()：连接可读流到可写流

constintegerStream=newReadableStream({asyncstart(controller){for(leti=0;i<5;i++){awaitnewPromise(resolve=>setTimeout(resolve,1000));controller.enqueue(i);}controller.close();}});constwritableStream=newWritableStream({write(value){console.log("处理后的值:",value);}});integerStream.pipeTo(writableStream);