解析JSON格式文本并处理数据
作者:mobiledu2502884963 | 来源:互联网 | 2024-12-26 16:06
本文介绍如何使用阿里云的fastjson库解析包含时间戳、IP地址和参数等信息的JSON格式文本,并进行数据处理和保存。
在处理日志文件时,我们经常遇到包含复杂嵌套结构的JSON格式文本。这些文本通常包括时间戳、IP地址、设备信息和其他参数。为了有效地解析和处理这类数据,我们可以使用阿里云提供的fastjson库。 ### 示例JSON文本 以下是一个典型的日志条目示例: ```json 2017-02-15T18:00:00.001Z-{ "visitTime": "1487152800001", "ip": "xx.xxx.xxx.xxx", "params": "{\"encode\":\"utf-8\",\"xxx\":\"0.0\",\"xxxx\":\"6869679\",\"resType\":\"json\",\"ak\":\"xxxxxxxxxxxxxxxxxxxxxxx\",\"xxx\":\"98\",\"uri\":\"/xx/xxx\",\"out_coord_type\":\"xxx\",\"coord_type\":\"xxxx\",\"domain\":null,\"location\":\"xxxx,xxxxx\",\"enc\":\"utf-8\",\"pois\":\"1\"}", "device": "xxxxxx", "sid": "xxxx" } ``` ### 代码实现 下面的代码展示了如何使用fastjson库解析上述JSON格式的日志文件,并提取关键信息进行处理和保存。 ```java package com.entity; import java.io.BufferedReader; import java.io.BufferedWriter; import java.io.File; import java.io.FileReader; import java.io.FileWriter; import java.io.IOException; import java.math.BigDecimal; import java.text.DecimalFormat; import com.alibaba.fastjson.JSON; import com.alibaba.fastjson.JSONObject; public class ReadAndWrite { public static void main(String[] args) { excute("F:\\xxxx.log"); } public static void excute(String path) { File file = new File(path); BufferedReader reader = null; try { reader = new BufferedReader(new FileReader(file)); String tempString; while ((tempString = reader.readLine()) != null) { JSONObject parseObject = JSON.parseObject(tempString); String params = parseObject.getString("params"); JSONObject parseObject2 = JSON.parseObject(params); // 获取车辆ID String carID; if (parseObject2.get("vhcid") == null) { String ip = parseObject.getString("ip"); String carID1 = MD5Utils.md5(ip).substring(0, 5); int parseInt = Integer.parseInt(carID1, 16) + 10000000; carID = String.valueOf(parseInt); } else { carID = parseObject2.getString("vhcid"); } // 获取定位时间 long visitTime = Long.parseLong(parseObject.getString("visitTime")) / 1000; String UTC = String.valueOf(visitTime); // 获取经纬度 String du; if (parseObject2.containsKey("location")) { String location = parseObject2.getString("location"); String[] split = location.split(","); BigDecimal bd = new BigDecimal(split[0]).multiply(BigDecimal.TEN.pow(5)); BigDecimal bd1 = new BigDecimal(split[1]).multiply(BigDecimal.TEN.pow(5)); DecimalFormat dcmFmt = new DecimalFormat("0.0"); du = dcmFmt.format(bd).substring(0, dcmFmt.format(bd).length() - 2) + "," + dcmFmt.format(bd1).substring(0, dcmFmt.format(bd1).length() - 2); } else if (parseObject2.containsKey("coords")) { String coords = parseObject2.getString("coords"); String[] split = coords.split(","); BigDecimal bd = new BigDecimal(split[0]).multiply(BigDecimal.TEN.pow(5)); BigDecimal bd1 = new BigDecimal(split[1]).multiply(BigDecimal.TEN.pow(5)); DecimalFormat dcmFmt = new DecimalFormat("0.0"); du = dcmFmt.format(bd).substring(0, dcmFmt.format(bd).length() - 2) + "," + dcmFmt.format(bd1).substring(0, dcmFmt.format(bd1).length() - 2); } else { du = "00000000,00000000"; } // 获取速度 String speed = parseObject2.containsKey("speed") ? String.valueOf((int) Double.parseDouble(parseObject2.getString("speed"))) : "0"; // 获取方向 String head = parseObject2.containsKey("direction") ? String.valueOf((int) Double.parseDouble(parseObject2.getString("direction"))) : (parseObject2.containsKey("dir") ? String.valueOf((int) Double.parseDouble(parseObject2.getString("dir"))) : "0"); // 设置状态和接收时间 String status = "1"; String time = UTC; // 拼接字符串并写入文件 if (!du.equals("00000000,00000000")) { StringBuilder sb = new StringBuilder(); sb.append(carID).append(",").append(UTC).append(",").append(du).append(",").append(speed).append(",").append(head).append(",").append(status).append(",").append(time); String message = sb.toString(); try (BufferedWriter bw = new BufferedWriter(new FileWriter("F:\\mspVisitLog20170223.txt", true))) { bw.write(message + "\r\n"); } } } } catch (IOException e) { e.printStackTrace(); } finally { if (reader != null) { try { reader.close(); } catch (IOException e1) { e1.printStackTrace(); } } } } } ``` 此代码片段实现了对日志文件中每一行JSON数据的解析,提取了必要的字段(如时间戳、IP地址、经纬度等),并对这些数据进行了进一步处理,最终将处理后的结果写入新的文件中。
推荐阅读
本文详细介绍了Java中org.neo4j.helpers.collection.Iterators.single()方法的功能、使用场景及代码示例,帮助开发者更好地理解和应用该方法。 ...
[详细]
蜡笔小新 2024-12-28 10:51:55
1:有如下一段程序:packagea.b.c;publicclassTest{privatestaticinti0;publicintgetNext(){return ...
[详细]
蜡笔小新 2024-12-27 19:32:17
本文详细介绍了如何通过HTTP响应和请求处理浏览器的Cookie信息,以及如何创建、设置和管理Cookie。同时探讨了会话跟踪技术中的Session机制,解释其原理及应用场景。 ...
[详细]
蜡笔小新 2024-12-27 18:20:43
主要用了2个类来实现的,话不多说,直接看运行结果,然后在奉上源代码1.Index.javaimportjava.awt.Color;im ...
[详细]
蜡笔小新 2024-12-27 18:18:10
本文深入探讨了如何通过多种技术手段优化ListView的性能,包括视图复用、ViewHolder模式、分批加载数据、图片优化及内存管理等。这些方法能够显著提升应用的响应速度和用户体验。 ...
[详细]
蜡笔小新 2024-12-28 10:36:30
Explore a common issue encountered when implementing an OAuth 1.0a API, specifically the inability to encode null objects and how to resolve it. ...
[详细]
蜡笔小新 2024-12-28 08:54:34
本文探讨了Java中类成员的初始化顺序、静态引入、可变参数以及finalize方法的应用。通过具体的代码示例,详细解释了这些概念及其在实际编程中的使用。 ...
[详细]
蜡笔小新 2024-12-27 19:39:42
本文详细介绍了Java中org.eclipse.ui.forms.widgets.ExpandableComposite类的addExpansionListener()方法,并提供了多个实际代码示例,帮助开发者更好地理解和使用该方法。这些示例来源于多个知名开源项目,具有很高的参考价值。 ...
[详细]
蜡笔小新 2024-12-27 16:11:49
本文详细介绍了Spring Cloud中的Ribbon组件如何实现服务调用的负载均衡。通过分析其工作原理、源码结构及配置方式,帮助读者理解Ribbon在分布式系统中的重要作用。 ...
[详细]
蜡笔小新 2024-12-27 16:01:25
前言--页数多了以后需要指定到某一页(只做了功能,样式没有细调)html ...
[详细]
蜡笔小新 2024-12-27 15:19:01
本文详细介绍了Akka中的BackoffSupervisor机制,探讨其在处理持久化失败和Actor重启时的应用。通过具体示例,展示了如何配置和使用BackoffSupervisor以实现更细粒度的异常处理。 ...
[详细]
蜡笔小新 2024-12-27 15:04:09
本文详细介绍了Java编程语言中的核心概念和常见面试问题,包括集合类、数据结构、线程处理、Java虚拟机(JVM)、HTTP协议以及Git操作等方面的内容。通过深入分析每个主题,帮助读者更好地理解Java的关键特性和最佳实践。 ...
[详细]
蜡笔小新 2024-12-27 13:55:14
本文介绍了在Windows环境下使用pydoc工具的方法,并详细解释了如何通过命令行和浏览器查看Python内置函数的文档。此外,还提供了关于raw_input和open函数的具体用法和功能说明。 ...
[详细]
蜡笔小新 2024-12-26 17:05:56
本文详细探讨了VxWorks操作系统中双向链表和环形缓冲区的实现原理及使用方法,通过具体示例代码加深理解。 ...
[详细]
蜡笔小新 2024-12-26 13:26:16
本文详细介绍了Java中的输入输出(IO)流,包括其基本概念、分类及应用。IO流是用于在程序和外部资源之间传输数据的一套API。根据数据流动的方向,可以分为输入流(从外部流向程序)和输出流(从程序流向外部)。此外,还涵盖了字节流和字符流的区别及其具体实现。 ...
[详细]
蜡笔小新 2024-12-25 00:37:31
mobiledu2502884963
这个家伙很懒,什么也没留下!