热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

解析JSON格式文本并处理数据

本文介绍如何使用阿里云的fastjson库解析包含时间戳、IP地址和参数等信息的JSON格式文本,并进行数据处理和保存。
在处理日志文件时,我们经常遇到包含复杂嵌套结构的JSON格式文本。这些文本通常包括时间戳、IP地址、设备信息和其他参数。为了有效地解析和处理这类数据,我们可以使用阿里云提供的fastjson库。

### 示例JSON文本
以下是一个典型的日志条目示例:
```json
2017-02-15T18:00:00.001Z-{
"visitTime": "1487152800001",
"ip": "xx.xxx.xxx.xxx",
"params": "{\"encode\":\"utf-8\",\"xxx\":\"0.0\",\"xxxx\":\"6869679\",\"resType\":\"json\",\"ak\":\"xxxxxxxxxxxxxxxxxxxxxxx\",\"xxx\":\"98\",\"uri\":\"/xx/xxx\",\"out_coord_type\":\"xxx\",\"coord_type\":\"xxxx\",\"domain\":null,\"location\":\"xxxx,xxxxx\",\"enc\":\"utf-8\",\"pois\":\"1\"}",
"device": "xxxxxx",
"sid": "xxxx"
}
```

### 代码实现
下面的代码展示了如何使用fastjson库解析上述JSON格式的日志文件,并提取关键信息进行处理和保存。

```java
package com.entity;

import java.io.BufferedReader;
import java.io.BufferedWriter;
import java.io.File;
import java.io.FileReader;
import java.io.FileWriter;
import java.io.IOException;
import java.math.BigDecimal;
import java.text.DecimalFormat;

import com.alibaba.fastjson.JSON;
import com.alibaba.fastjson.JSONObject;

public class ReadAndWrite {
public static void main(String[] args) {
excute("F:\\xxxx.log");
}

public static void excute(String path) {
File file = new File(path);
BufferedReader reader = null;
try {
reader = new BufferedReader(new FileReader(file));
String tempString;
while ((tempString = reader.readLine()) != null) {
JSONObject parseObject = JSON.parseObject(tempString);
String params = parseObject.getString("params");
JSONObject parseObject2 = JSON.parseObject(params);

// 获取车辆ID
String carID;
if (parseObject2.get("vhcid") == null) {
String ip = parseObject.getString("ip");
String carID1 = MD5Utils.md5(ip).substring(0, 5);
int parseInt = Integer.parseInt(carID1, 16) + 10000000;
carID = String.valueOf(parseInt);
} else {
carID = parseObject2.getString("vhcid");
}

// 获取定位时间
long visitTime = Long.parseLong(parseObject.getString("visitTime")) / 1000;
String UTC = String.valueOf(visitTime);

// 获取经纬度
String du;
if (parseObject2.containsKey("location")) {
String location = parseObject2.getString("location");
String[] split = location.split(",");
BigDecimal bd = new BigDecimal(split[0]).multiply(BigDecimal.TEN.pow(5));
BigDecimal bd1 = new BigDecimal(split[1]).multiply(BigDecimal.TEN.pow(5));
DecimalFormat dcmFmt = new DecimalFormat("0.0");
du = dcmFmt.format(bd).substring(0, dcmFmt.format(bd).length() - 2) + "," + dcmFmt.format(bd1).substring(0, dcmFmt.format(bd1).length() - 2);
} else if (parseObject2.containsKey("coords")) {
String coords = parseObject2.getString("coords");
String[] split = coords.split(",");
BigDecimal bd = new BigDecimal(split[0]).multiply(BigDecimal.TEN.pow(5));
BigDecimal bd1 = new BigDecimal(split[1]).multiply(BigDecimal.TEN.pow(5));
DecimalFormat dcmFmt = new DecimalFormat("0.0");
du = dcmFmt.format(bd).substring(0, dcmFmt.format(bd).length() - 2) + "," + dcmFmt.format(bd1).substring(0, dcmFmt.format(bd1).length() - 2);
} else {
du = "00000000,00000000";
}

// 获取速度
String speed = parseObject2.containsKey("speed") ? String.valueOf((int) Double.parseDouble(parseObject2.getString("speed"))) : "0";

// 获取方向
String head = parseObject2.containsKey("direction") ? String.valueOf((int) Double.parseDouble(parseObject2.getString("direction"))) : (parseObject2.containsKey("dir") ? String.valueOf((int) Double.parseDouble(parseObject2.getString("dir"))) : "0");

// 设置状态和接收时间
String status = "1";
String time = UTC;

// 拼接字符串并写入文件
if (!du.equals("00000000,00000000")) {
StringBuilder sb = new StringBuilder();
sb.append(carID).append(",").append(UTC).append(",").append(du).append(",").append(speed).append(",").append(head).append(",").append(status).append(",").append(time);
String message = sb.toString();
try (BufferedWriter bw = new BufferedWriter(new FileWriter("F:\\mspVisitLog20170223.txt", true))) {
bw.write(message + "\r\n");
}
}
}
} catch (IOException e) {
e.printStackTrace();
} finally {
if (reader != null) {
try {
reader.close();
} catch (IOException e1) {
e1.printStackTrace();
}
}
}
}
}
```

此代码片段实现了对日志文件中每一行JSON数据的解析,提取了必要的字段(如时间戳、IP地址、经纬度等),并对这些数据进行了进一步处理,最终将处理后的结果写入新的文件中。
推荐阅读
  • andr ... [详细]
  • 1:有如下一段程序:packagea.b.c;publicclassTest{privatestaticinti0;publicintgetNext(){return ... [详细]
  • 本文介绍了一款用于自动化部署 Linux 服务的 Bash 脚本。该脚本不仅涵盖了基本的文件复制和目录创建,还处理了系统服务的配置和启动,确保在多种 Linux 发行版上都能顺利运行。 ... [详细]
  • 本文总结了在使用Ionic 5进行Android平台APK打包时遇到的问题,特别是针对QRScanner插件的改造。通过详细分析和提供具体的解决方法,帮助开发者顺利打包并优化应用性能。 ... [详细]
  • 本文介绍如何使用 NSTimer 实现倒计时功能,详细讲解了初始化方法、参数配置以及具体实现步骤。通过示例代码展示如何创建和管理定时器,确保在指定时间间隔内执行特定任务。 ... [详细]
  • 2023年京东Android面试真题解析与经验分享
    本文由一位拥有6年Android开发经验的工程师撰写,详细解析了京东面试中常见的技术问题。涵盖引用传递、Handler机制、ListView优化、多线程控制及ANR处理等核心知识点。 ... [详细]
  • 本文介绍了在Windows环境下使用pydoc工具的方法,并详细解释了如何通过命令行和浏览器查看Python内置函数的文档。此外,还提供了关于raw_input和open函数的具体用法和功能说明。 ... [详细]
  • 解决JAX-WS动态客户端工厂弃用问题并迁移到XFire
    在处理Java项目中的JAR包冲突时,我们遇到了JaxWsDynamicClientFactory被弃用的问题,并成功将其迁移到org.codehaus.xfire.client。本文详细介绍了这一过程及解决方案。 ... [详细]
  • 本文详细介绍了Git分布式版本控制系统中远程仓库的概念和操作方法。通过具体案例,帮助读者更好地理解和掌握如何高效管理代码库。 ... [详细]
  • QUIC协议:快速UDP互联网连接
    QUIC(Quick UDP Internet Connections)是谷歌开发的一种旨在提高网络性能和安全性的传输层协议。它基于UDP,并结合了TLS级别的安全性,提供了更高效、更可靠的互联网通信方式。 ... [详细]
  • 深入理解OAuth认证机制
    本文介绍了OAuth认证协议的核心概念及其工作原理。OAuth是一种开放标准,旨在为第三方应用提供安全的用户资源访问授权,同时确保用户的账户信息(如用户名和密码)不会暴露给第三方。 ... [详细]
  • 2023 ARM嵌入式系统全国技术巡讲旨在分享ARM公司在半导体知识产权(IP)领域的最新进展。作为全球领先的IP提供商,ARM在嵌入式处理器市场占据主导地位,其产品广泛应用于90%以上的嵌入式设备中。此次巡讲将邀请来自ARM、飞思卡尔以及华清远见教育集团的行业专家,共同探讨当前嵌入式系统的前沿技术和应用。 ... [详细]
  • 国内BI工具迎战国际巨头Tableau,稳步崛起
    尽管商业智能(BI)工具在中国的普及程度尚不及国际市场,但近年来,随着本土企业的持续创新和市场推广,国内主流BI工具正逐渐崭露头角。面对国际品牌如Tableau的强大竞争,国内BI工具通过不断优化产品和技术,赢得了越来越多用户的认可。 ... [详细]
  • 深入理解Cookie与Session会话管理
    本文详细介绍了如何通过HTTP响应和请求处理浏览器的Cookie信息,以及如何创建、设置和管理Cookie。同时探讨了会话跟踪技术中的Session机制,解释其原理及应用场景。 ... [详细]
  • 本文介绍如何在 Xcode 中使用快捷键和菜单命令对多行代码进行缩进,包括右缩进和左缩进的具体操作方法。 ... [详细]
author-avatar
mobiledu2502884963
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有