json - 使用 R 从 API 中提取数据

Question

我可以访问 azure 中的一些遥测数据(特别是使用移动应用程序的客户的所有 API 调用)。我已经使用 R 中的 httr 包来请求 3 分钟内的数据，并像这样评估响应(显然有我自己的应用程序 ID 和 key ，我在下面未包含这些内容):

install.packages("httr")
library(httr)

r1 <- GET("https://api.applicationinsights.io/v1/apps/application-ID/query?timespan=PT0.05H&query=requests", add_headers("X-Api-Key" = "my-unique-key"))

r1

####### response object ########
# Response [https://api.applicationinsights.io/v1/apps/application-ID/query?timespan=PT0.05H&query=requests]
# Date: 2018-01-11 15:55
# Status: 200
# Content-Type: application/json; charset=utf-8
# Size: 84.7 kB

在环境窗口中，我可以看到 r1 是一个包含 10 个的列表，并且有 84,652 个原始值:

我还可以使用内容函数来查看我的列表为 1:

r2 <- content(r1)

我真的有两个问题:

1) 如何理解环境窗口中的这些输出？他们告诉我关于数据结构的什么信息(我认为它是基于内容类型描述的 JSON)

2)有没有办法检索数据并将其转换为表格格式(数据框)？我不明白如何查询数据。我阅读了这篇文章，但无法将其应用于我的数据:https://tclavelle.github.io/blog/r_and_apis/

如有任何帮助，我们将不胜感激。

<小时/>

2018 年 1 月 19 日更新

我使用了jalind的建议。请参阅下面的代码和输出:

library(httr)
library(jsonlite)

r1 <- GET("https://api.applicationinsights.io/v1/apps/application-ID/query?timespan=PT0.05H&query=requests", add_headers("X-Api-Key" = "my-unique-key"))

#convert to a character string
r2 <- rawtoChar(r1$content)  

#check the class is character
class(r2)    

# now extract JSON from string object
r3 <- fromJSON(r2)

# convert to a data frame - this returns a data frame with columns called name, columns and rows 
x <- as.data.frame(r3[[1]])  

# column headings data frame (there are 37 columns - see example of first 3 columns below):               
c <- as.data.frame(x$columns)

#                       name      type
#                  timestamp    datetime
#                         id     string
#                     source     string

# data frame with 37 columns and all rows of telemetry data (only showing first 4 columns of this data frame):

r <- as.data.frame(x$rows)
#           X1                               X2                X3                  X4
# 1   2018-01-19T10:29:25.4Z       |aticCNxxxx=.f83assss_     <NA>          GET /Cards/Cardtype1
# 2   2018-01-19T10:29:30.226Z     |tX6Xz0xxxxx=.27cxcxae_    <NA>          GET /AddressLookup/Address
# 3   2018-01-19T10:29:45.327Z     |OgfPbicLues=.f83a9a1f_    <NA>          POST /Account/MobileDevice
# 4   2018-01-19T10:29:46.078Z     |V5MwpXXxxxxx=.f83axxxx_   <NA>          GET /Cards/Cardtype1
# 5   2018-01-19T10:30:00.427Z     |Jok8wxxxxxx=.7be33aaa_    <NA>          GET /cards/Cardtype1

Answer 1

p0bs 是对的 - 你应该查看 jsonlite 包。

我不知道我是否可以完全帮助您解决问题的第一部分，但我也许可以帮助您将 JSON 放入数据框架中。

当您将 GET 函数应用于 URL 时，返回的原始内容为十六进制。

raw.result <- GET(url = url, path = path)
head(raw.result$content) ## This is in hex

十六进制很难使用，因此您可能要做的一件事是将内容转换为字符串。您可以使用 rawToChar 函数来完成此操作。

text.raw.content <- rawToChar(raw.result$content)
class(text.raw.content) ## Now its a string
nchar(text.raw.content) ## How many chars?

好的 - 现在你有一个字符串......它比十六进制更好......但仍然不是你正在寻找的。但是您可以使用 jsonlite 包中的 fromJSON 函数从字符串对象中提取 JSON。

json.content <- fromJSON(text.raw.content)
class(json.content) ## It's a list
length(json.content) ## With two elements
names(json.content) ## meta and data... makes sense...
class(json.content[[2]]) ## data.frame

因此，基本上，此列表的第二个元素是转换为 native R 数据帧的 JSON 内容。根据我的经验，在你走到这一步之后，还必须进行更多的思考……但希望这能让你开始。