- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我有一个 Android 应用程序项目,可以下载巨大的 Json 字符串并提取程序要求的有用信息。但是这个文件非常大(几乎 100mb),无法将它们放入内存中,所以我需要读取较小的部分。
我的 Json 字符串看起来像,所有字符串都是一行。所以我无法逐行读取,因为 OOM(内存不足)
{"Tag":"[{\"mySubTag\":\"myValue\/myValue\"},{\"mySubTag\":\"myValueWithAnotherEscapedStringInside\\xyz\/likeThis\"},...]"}
通常,我使用 JsonObject 中的标签作为字符串提取它们,然后从“Tag”属性中获取字符串值,并再次使用该字符串创建新的 JsonArray,因此它不会自动从 JsonArray 类中转义,但 Android 不允许放置巨大的值Json 文件(或字符串)写入内存。我尝试通过流式传输来删除反斜杠,但如果 subTag 值内部有转义字符,则它不是正确的转义方法。
我的问题是什么是完成这项工作的最佳且性能友好的方式?
(注意:抱歉英语不好)
更新1:
在 @pskink 推荐之后,我使用了 android.util.JsonReader 并且编写了类似的代码:
JsonReader jsonReader = new JsonReader(new FileReader(f));//f is defined previous code but not shown!
jsonReader.beginObject();
String name = jsonReader.nextName();
String value = jsonReader.nextString();
Log.d(AppConstants.TAG, "name: " + name);
Log.d(AppConstants.TAG, "value: " + value.length());//value is so big I only care about its length
JsonReader jsonReader1 = new JsonReader(new StringReader(value));
while (jsonReader1.hasNext()) {
JsonToken token = jsonReader1.peek();
switch (token) {
case BEGIN_ARRAY:
jsonReader1.beginArray();
Log.d(AppConstants.TAG, "BEGIN_ARRAY");
continue;
case END_ARRAY:
jsonReader1.endArray();
Log.d(AppConstants.TAG, "END_ARRAY");
continue;
case BEGIN_OBJECT:
jsonReader1.beginObject();
Log.d(AppConstants.TAG, "BEGIN_OBJECT");
continue;
case END_OBJECT:
jsonReader1.endObject();
Log.d(AppConstants.TAG, "END_OBJECT");
continue;
case NAME:
Log.d(AppConstants.TAG, "name: " + jsonReader1.nextName());
continue;
case STRING:
Log.d(AppConstants.TAG, "String: " + jsonReader1.nextString());
continue;
case NUMBER:
Log.d(AppConstants.TAG, "number: " + jsonReader1.nextString());
continue;
case BOOLEAN:
Log.d(AppConstants.TAG, "boolean: " + jsonReader1.nextBoolean());
continue;
case NULL:
jsonReader1.nextNull();
continue;
case END_DOCUMENT:
Log.d(AppConstants.TAG, "END_DOCUMENT");
break;
}
}
我的输出是:
Tag
69387276
BEGIN_ARRAY
BEGIN_OBJECT
name: mySubTag
String: myValue/myValue
我很困惑为什么数组的其余元素被忽略!
更新2:
经过一些调试过程后,我意识到 hasNext() 方法返回“如果当前数组或对象有另一个元素,则返回 true”。但当前不是后面的元素,所以我更新了 while 循环,如下所示:
while (jsonReader1.peek()!=JsonToken.END_DOCUMENT) {
JsonToken token = jsonReader1.peek();
switch(token){
...
}
}
最佳答案
@pskink 推荐 android.util.JsonReader
在使用这个库编写代码后解决了我的问题。要查看我的代码,请参阅我的相关更新。
谢谢@pskink。
关于java - Java中巨大的Json字符串转义的最佳方法是什么,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/56281505/
我通过在共享首选项中使用 GSON 将其转换为 json 来存储我的复杂对象。但是在检索它时,无法获得预期的字符串。 代码 这里 holderListCustomizationMap 是对象的复杂映射
因此,我正在尝试对大于可用RAM的gz压缩文件执行某种面向行的操作,因此排除了将其首先读取为字符串的情况。问题是,如何在rust(缺少gunzip file.gz|./my-rust-program)
我试图更好地理解为什么具有潜在大精度的大数字处理不一致,特别是在 JavaScript 及其本地化工具(例如 ECMA-402/Intl)中。我假设这与 float 的使用有关,但我想了解限制在哪里和
我们有一个 5GB 的 csv 文件,这是我们业务的主列表。 有多个类别,每个类别包含数千条记录。我们的目标是将每个类别导出为其自己的 csv 文件。 我们如何运行查询并导出数据? 运行 OSX。有没
基于上一个问题 ( see here ),我试图通过 xmlEventParse 读取许多大型 xml 文件,同时保存节点变化数据。使用此示例 xml:https://www.nlm.nih.gov/
我正在开发一个系统,它加载一个巨大的 CSV 文件(超过 100 万行)并保存到数据库中。每行也有超过一千个字段。 CSV 文件被视为一个批处理,每一行都被视为其子对象。在添加对象的过程中,每个对象都
借助node-google模块 我编写了一个简单的 Node 模块来为我的网络应用程序启用“文本网络搜索”功能,并在我的一个 View 中显示结果。 由于在来自同一 IP 的少量查询后 Google
我有相当大的 4D 阵列 [20x20x40x15000],我使用 h5py 将其作为 HDF5 文件保存到磁盘.现在的问题是我想计算整个数组的平均值,即使用: numpy.average(HDF5_
我在遗留代码库中连接巨大的 CString 时遇到问题。 CStrings 可以包含 base64 编码的文件,因此可能很大。在某些时候,这些 CString 会像这样连接起来: result +=
我正在尝试让我的服务器提供来自另一台服务器的巨大文件。但是,为了保护我的凭据免受该远程服务器的攻击,我不能简单地将请求者重定向到文件 url;另一方面,虽然使用 StreamingHttpRespon
感谢对此的任何见解,我有 2 个问题: 1) 弄清楚为什么我的本地数据库 oplog 庞大且不断增长 2) 安全删除(或重置)我的 local.oplog 以释放 18 GB 的浪费空间 场景:我一直
我的预期任务:获取大量数据(1 GB 及更多大小)json 字符串,操作(进行一些格式化、解析 json、重组 json 数据)并写入新格式化的 json 字符串作为响应。处理这种情况的更好方法是什么
我做了一个小的 Angular 4 应用程序,但我不知道如何应用 tree shaking 和 aot 编译。我运行的命令如下: ng build --prod --aot 但我得到的结果仍然很大,供
我是一名优秀的程序员,十分优秀!