从nodejs有效地序列化(和读取)int数组

我正在考虑在nodejs中构建一个应用程序,它需要流式传输包含整数数组的大(> GB)文件.最重要的是,阵列需要以最佳方式进行序列化,因此不是基于ascii,理想情况下使用8位用于较小的整数(这将是绝大多数数据),但仍然能够代表更大的数字.

这个问题可能不仅仅是关于nodejs,而是如何在nodejs中解决这个问题？是否有现成的流式文件解决方案,其中包含来自磁盘的自定义字节编码？或者更好,整数数组？

理想情况下,即使使用ssd,流的每个部分的解码也应该是磁盘绑定而不是cpu绑定.