Question

我有一个像这样的JSON文件：

{"start":1489730400000, 
"end":1489733999999, 
"interval":1000, 
"weight":1, 
"augmented": true, 
"profileName":"Selene/prod", 
"prunedSamples":0, 
"fleet":{"c4.2xlarge":14.313278698132972}, "costPerSecond":0.000008259246540496541, 
"profileData":{
    "name":"ALL", 
    "states":{"BLOCKED":2281, "NEW":0, "RUNNABLE":125833, "TERMINATED":0, "TIMED_WAITING":23170429, "WAITING":59901416},
    "location": "0", 
    "hidden": [], 
    "children":[{"name":"GarbageCollector.gc", 
    "states":{"BLOCKED":0, "NEW":0, "RUNNABLE":17069}, 
    "location": "0.0", 
    "hidden": [], 
    "children":[{"name":"ConcurrentMarkSweep.gc", 
                "states":{"BLOCKED":0, "NEW":0, "RUNNABLE":14977}, 
                "location": "0.0.0", 
                "hidden": [], 
                "level": 1},
                {"name":"ParNew.gc", 
                 "states":{"BLOCKED":0, "NEW":0, "RUNNABLE":2092}, 
                 "location": "0.0.1", 
                 "hidden": [], 
                 "level": 1}]
}}

这只是其中的一部分。我得到一个更大的GZip格式的文件，我首先解压缩并将解压缩的部分存储在一个字符串中。我使用以下代码：

URL url = new URL("http://example.com/Selene%20Prod?start=1490234400000&end=1490237999999&maxDepth=200&minimumCountsThreshold=0.00");
URLConnection myUrlConnection = url.openConnection();
GZIPInputStream gZIPInputStream = new GZIPInputStream(myUrlConnection.getInputStream());
StringBuffer decompressedStringBuffer = new StringBuffer();
int bytes_read;
while ((bytes_read = gZIPInputStream.read(buffer)) > 0) {
    String part = new String(buffer, 0 ,bytes_read, "UTF-8");
    decompressedStringBuffer.append(part);
}
gZIPInputStream.close();
String decompressedString = decompressedStringBuffer.toString();
JSONObject obj = new JSONObject(decompressedString);
JSONArray profileData = obj.getJSONObject("profileData").getJSONArray("children");

我的代码在Caused by: java.lang.OutOfMemoryError: Java heap space上提供decompressedStringBuffer.append(part);。由于文件太大而无法存储在内存中，我考虑将其存储在文件中，然后将文件读回以转换为JSON，但是我将使用FileInputStream创建的JSON对象会给我一个{{1 }}。

我获得的JSON中唯一有用的数据是Caused by:java.lang.OutOfMemoryError: Java heap space和name下的children。

有没有办法在解析inputStream时只将它们转换为profileData而忽略其他的？

如果有人能够想到更好的方式，我也会感激。

Answer 1

我认为你不需要去JACKSON库只是试图找到一种方法来解析你在GSON中的大型JSON。

尝试This resource这是GSON作者的答案。在同一页面上，您将使用流媒体和树模型找到JACKSON的工作示例（如果您想继续使用Jackson）

如果您想增加堆大小，请参考下面的链接： How to increase Java heap size

在Java中有选择地解析JSON

1 个答案: