个人中心
文章发布
退出
作者热门文章
- Java 双重比较
- java - 比较器与 Apache BeanComparator
- Objective-C 完成 block 导致额外的方法调用？
- database - RESTful URI 是否应该公开数据库主键？
26
4
<分区>
我正在 Node Js 中读取一个大型 XML 文件(~1.5gb)。我正在尝试对其进行流式处理并对大块数据做一些事情，但我发现很难理解文档。
我目前的简单代码是:
var fs = require('fs');
var stream = fs.createReadStream('xml/bigxmlfile.xml');
stream.on('data', function(chunk){
console.log(chunk)
});
控制台给出了一堆 buffer 十六进制(我认为)代码，如下所示:
<Buffer 65 61 6e 2d 63 75 74 20 67 72 69 64 20 6c 69 6e 65 73 20 74 68 65 20 73 70 72 65 61 64 20 63 6f 6c 6c 61 72 20 61 6e 64 20 6d 69 74 65 72 65 64 2c 20 74 ...>
<Buffer 65 79 77 6f 72 64 73 3e 3c 2f 6b 65 79 77 6f 72 64 73 3e 3c 75 70 63 3e 34 32 39 35 36 30 31 33 38 33 38 39 3c 2f 75 70 63 3e 3c 6d 31 3e 36 38 38 39 31 ...>
<Buffer 6f 75 6e 74 3e 3c 63 75 72 72 65 6e 63 79 3e 55 53 44 3c 2f 63 75 72 72 65 6e 63 79 3e 3c 2f 63 6f 73 74 3e 3c 69 6e 66 6f 72 6d 61 74 69 6f 6e 3e 3c 2f ...>
<Buffer 65 20 62 72 69 65 66 73 20 74 68 61 74 20 73 69 74 20 63 6f 6d 66 6f 72 74 61 62 6c 79 20 61 74 20 74 68 65 20 68 69 70 73 2e 20 43 6f 6c 6f 72 28 73 29 ...>
<Buffer 3c 64 65 73 63 72 69 70 74 69 6f 6e 3e 3c 73 68 6f 72 74 3e 43 7a 65 63 68 20 63 72 79 73 74 61 6c 73 20 73 70 72 69 6e 6b 6c 65 20 61 20 73 6c 69 6e 67 ...>
我也试过:
var fs = require('fs');
var parseString = require('xml2js').parseString;
var stream = fs.createReadStream('xml/lsnordstrom.xml');
stream.on('data', function(chunk){
//do something on file data
parseString(chunk, function (err, result) {
console.log(result);
});
});
(这样我就可以将 XML 流解析为 JSON)但是我在控制台中得到了 undefined 结果。
我如何实际将这些数据转换成有用的东西？
26
4
0
我期望 new Buffer(buffer.toString()) 始终是逐字节相等的。但是，我遇到的情况并非如此。 首先，这是一个真实的案例: var buf1 = new Buffer(32);
我有用于记录数据的 Protocol Buffer 。 message Message { required double val1 = 1; optional int val2 =
请注意以下简单程序(基于 protobuf-net 项目 v1 wiki 中的示例): using System.Collections.Generic; using System.Diagnosti
在 Protocol Buffer 中，有没有办法让消息包含嵌套消息的集合？例如，消息主管可能有一个员工集合以及主管的姓名和部门。 最佳答案 是的。您使用 repeated领域； message Em
我想知道 Protocol Buffer 在解析流时如何处理损坏的数据。有没有办法知道数据是否已损坏。 Protocol Buffer 是否提供任何内置的数据完整性检查机制？ 谢谢， 最佳答案 没有任
Protocol Buffer 如何处理类型版本控制？ 例如，当我需要随时间更改类型定义时？就像添加和删除字段一样。 最佳答案 Google 设计的 protobuf 对版本控制非常宽容: 意外数据要
我尝试阅读 Protobuf 文档，但无法想象它可以用于许多用例。我想知道一些实际的 Protocol Buffer 性能改进用例。 谢谢 最佳答案 Protocol buffers 是一个序列化库，
给定 Protocol Buffer 模式和一些数据， Protocol Buffer 序列化是否跨库和语言具有确定性？ 基本上，无论使用什么库，我是否可以保证相同的数据总是以相同的方式(直到字节)序
我正在使用一个示例 UWP C++/CX 程序，该程序创建两个 UDP 网络通信线程，它们使用 Windows::Storage::Streams::DataWriter 相互发送数据。和 Windo
我正在使用以下代码 int lenSend = odl->ByteSize(); char* buf = (char *)malloc(lenSend); odl->SerializeToArray(
Protocol Buffer 文档警告说...... You should never add behaviour to the generated classes by inheriting fr
我有一个定义如下的原型(prototype)模式， message User { int64 id = 1; bool email_subscribed = 2; bool sms_
我试图了解 Protocol Buffer 编码方法，将消息转换为二进制(或十六进制)格式时，我无法理解嵌入消息的编码方式。 我猜可能和内存地址有关，但我找不到准确的关系。 这是我所做的。 第 1 步
我需要序列化和反序列化一系列与字节流之间的 Protocol Buffer 消息。有一些预先确定的消息类型。编码类型信息的推荐方法是什么，以便我的应用程序可以知道它应该读取哪种类型？ 最佳答案 最常见
与GSON相比， Protocol Buffer (protobuf)的优缺点是什么？ 在什么情况下，protobuf比GSON更合适？ 对于一个非常笼统的问题，我感到抱歉。 最佳答案 json(通过
message Person { required Empid = 1 [default = 100]; required string name = 2 [default = "Raju"]
我正在研究一个小型设备，该设备具有相当大的一组配置参数(~100 KB)，这些参数是从 PC 软件生成的。过去，我们将参数存储在二进制文件中并将它们加载到数据结构中。维护有点烦人(不同的语言，确保结构
来自Encoding - Protocol Buffers - Google Code上的“签名类型”: ZigZag encoding maps signed integers to unsigne
我正在使用 Protocol Buffer ，一切正常。除了我不明白的事实 - 为什么我需要 proto 中的编号标签文件 : message SearchRequest { required s
Protocol Buffer 的吸引人的功能之一是它允许您扩展消息定义，而不会破坏使用较旧定义的代码。对于枚举according to the documentation: a field with
我是一名优秀的程序员,十分优秀！