栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 面试经验 > 面试问答

从深度嵌套的JSON创建Pandas DataFrame

面试问答 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

从深度嵌套的JSON创建Pandas DataFrame

我认为,以产生重复列名的方式组织数据只会在以后给您带来麻烦。更好的方法是恕我直言创造每一个列

pivots
interval_id
p_value
。将数据加载到熊猫中后,这将使查询数据变得非常容易。

另外,您的JSON中有一些错误。我通过它来查找错误。

jq
帮助这里

import shjq = sh.jq.bake('-M')  # disable colorizingjson_data = "from above"rule = """[{pivots: .intervals[].pivots,  interval_id: .intervals[].series[].interval_id, p_value: .intervals[].series[].p_value}]"""out = jq(rule, _in=json_data).stdoutres = pd.Dataframe(json.loads(out))

这将产生类似于以下内容的输出

    interval_id       p_value      pivots32 2  2.867501e-06  Jane Smith33 2  1.000000e+00  Jane Smith34 2  1.116279e-08  Jane Smith35 2  2.867501e-06  Jane Smith36 0  1.000000e+00   Bob Smith37 0  1.116279e-08   Bob Smith38 0  2.867501e-06   Bob Smith39 0  1.000000e+00   Bob Smith40 0  1.116279e-08   Bob Smith41 0  2.867501e-06   Bob Smith42 1  1.000000e+00   Bob Smith43 1  1.116279e-08   Bob Smith

改编自此评论

当然,您始终可以调用

res.drop_duplicates()
以删除重复的行。这给

In [175]: res.drop_duplicates()Out[175]:    interval_id       p_value      pivots0  0  1.000000e+00  Jane Smith1  0  1.116279e-08  Jane Smith2  0  2.867501e-06  Jane Smith6  1  1.000000e+00  Jane Smith7  1  1.116279e-08  Jane Smith8  1  2.867501e-06  Jane Smith12 2  1.000000e+00  Jane Smith13 2  1.116279e-08  Jane Smith14 2  2.867501e-06  Jane Smith36 0  1.000000e+00   Bob Smith37 0  1.116279e-08   Bob Smith38 0  2.867501e-06   Bob Smith42 1  1.000000e+00   Bob Smith43 1  1.116279e-08   Bob Smith44 1  2.867501e-06   Bob Smith48 2  1.000000e+00   Bob Smith49 2  1.116279e-08   Bob Smith50 2  2.867501e-06   Bob Smith[18 rows x 3 columns]


转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/624008.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号