python - usn 解析器将类似 json 的数据转换为 pandas 数据帧

Question

我有 usnparser 数据，其输出如下(任意字段):

{
 "thisisafield":"THISISAVALUE",
 "thisisanewf": "ThisIsANewVal",
 "LastField":"LastValue"
}
{
 "thisisafield":"THISISAVALUE1",
 "thisisanewf": "ThisIsANewVal1",
 "LastField":"LastValue1"
}

我正在尝试用 pandas 来阅读它，如下所示:

data = pathtomyfile
pd.read_json(data, orient='records')

我也尝试过使用如下所示的 json:

数据 = json.dumps(pathtomyfile) pd.read_json(data,orient='记录')

如何将我的数据获取到 pandas 数据框？

Answer 1

这是一种方法，但您需要编辑文件中的数据:

import pandas as pd
import ast

with open(pathtomyfile) as f:
    data = f.read()
    data = '[' + data.replace('\n', '').replace('}', '},') + ']' #convert it to list of dicts
    df = pd.DataFrame(ast.literal_eval(data))
    df
#thisisafield  thisisanewf    LastField
#THISISAVALUE  ThisIsANewVal  LastValue
#THISISAVALUE1 ThisIsANewVal1 LastValue1

并将数据 json 可转储，如下所示:

data = '[' + data.replace('\n', '').replace('}', '},', data.count('}')-1) + ']'
df = pd.read_json(data)