杨先森的博客 2020-04-30 15:34 采纳率: 50%
浏览 440
已采纳

如何通过shell语句解析某一列的json并输出里面字段

怎么编写shell语句,将数据中的某一列json格式的数据提取解析出来,并追加在对应的那条数据后面。尽量用shell语言实现,如果有其他简便方法也可以

原始数据内容如下:

335970 | 115 | {"traceid":"0421000841sgm6p","pixeldata":-13075235,"pixelcoordinate":"703,160","pixelabnormaldata":0,"collectedpixeldata":"703,160"}

335971 | 116 | {"traceid":"0421000666sgm6p","pixeldata":-12325235,"pixelcoordinate":"733,144","pixelabnormaldata":1,"collectedpixeldata":"333,132

结果数据:

335970 | 115 | 0421000841sgm6p | -13075235 | 703,160 | 0 | 703,160

335971 | 116 | 0421000666sgm6p | -12325235 | 733,144 | 1 | 333,132

  • 写回答

2条回答 默认 最新

  • 毕小宝 博客专家认证 2020-05-01 08:58
    关注

    使用 awk 的shelll 编程,首先定义一个数据文件 data.log

    335970 | 115 | {"traceid":"0421000841sgm6p","pixeldata":-13075235,"pixelcoordinate":"703,160","pixelabnormaldata":0,"collectedpixeldata":"703,160"} 
    335971 | 116 | {"traceid":"0421000666sgm6p","pixeldata":-12325235,"pixelcoordinate":"733,144","pixelabnormaldata":1,"collectedpixeldata":"333,132 
    

    其次,编写处理命令如下:

    awk -F "|"  -vOFS="|"  '{l=split($3,arr,",\"");$3="";for(i=1;i<=l;i++){ll=split(arr[i],arr2,":"); if(i!=1)$3=$3"|";$3=$3arr2[2]} ;gsub(/\"/,"",$3);gsub(/\}/,"",$3);print }' ./data.log
    

    最后执行结果:
    图片说明

    语法说明,使用 Awk 用 | 连接输出,其中单独对 第三列再处理,最后对无用字符替换,处理逻辑如下;

    {
    l=split($3,arr,",\""); // 对第三列用 ," 分割,得到 JSON 的 key-value
    $3="";
    for(i=1;i<=l;i++){ // 遍历第三列的 JSON 属性
       ll=split(arr[i],arr2,":"); // 再对每一个 key-value 用: 分割
       if(i!=1)$3=$3"|"; // 非第一个 key-value 的时候,需要连接符号 |
       $3=$3arr2[2]} ; // 拼接新的第三例,只取JSON 的 值列
       gsub(/\"/,"",$3); // 替换值的 "
       gsub(/\}/,"",$3); // 替换掉右侧的 }
       print 
    }
    

    不对第三列的最终结果替换是这样的:
    图片说明

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

悬赏问题

  • ¥15 安装opengauss数据库报错
  • ¥15 【急】在线问答CNC雕刻机的电子电路与编程
  • ¥60 在mc68335芯片上移植ucos ii 的成功工程文件
  • ¥15 笔记本外接显示器正常,但是笔记本屏幕黑屏
  • ¥15 Python pandas
  • ¥15 蓝牙硬件,可以用哪几种方法控制手机点击和滑动
  • ¥15 生物医学数据分析。基础课程就v经常唱课程舅成牛逼
  • ¥15 云环境云开发云函数对接微信商户中的分账功能
  • ¥15 空间转录组CRAD遇到问题
  • ¥20 materialstudio计算氢键脚本问题