- android - 多次调用 OnPrimaryClipChangedListener
- android - 无法更新 RecyclerView 中的 TextView 字段
- android.database.CursorIndexOutOfBoundsException : Index 0 requested, 光标大小为 0
- android - 使用 AppCompat 时,我们是否需要明确指定其 UI 组件(Spinner、EditText)颜色
我对ckan有一些疑问:
如何:
而且我需要在ckan网站上注册才能查询数据吗?
我使用的是 Pyhton 3.6.1
编辑 2:我尝试过以下代码:
import urllib
url = 'http://dados.cvm.gov.br/api/action/datastore_search?resource_id=92741280-58fc-446b-b436-931faaca4fb4&q=CNPJ_FUNDO:11.286.399/0001-35'
fileobj = urllib.request.urlopen(url)
print(fileobj.read())
但是,结果是这样的:
b'{"help": "http://dados.cvm.gov.br/api/3/action/help_show?name=datastore_search", "success": true, "result": {"resource_id": "92741280-58fc-446b-b436-931faaca4fb4", "fields": [{"type": "int4", "id": "_id"}, {"type": "text", "id": "CNPJ_FUNDO"}, {"type": "timestamp", "id": "DT_COMPTC"}, {"type": "numeric", "id": "VL_TOTAL"}, {"type": "numeric", "id": "VL_QUOTA"}, {"type": "numeric", "id": "VL_PATRIM_LIQ"}, {"type": "numeric", "id": "CAPTC_DIA"}, {"type": "numeric", "id": "RESG_DIA"}, {"type": "numeric", "id": "NR_COTST"}, {"type": "int8", "id": "_full_count"}, {"type": "float4", "id": "rank"}], "q": "CNPJ_FUNDO:11.286.399/0001-35", "records": [], "_links": {"start": "/api/action/datastore_search?q=CNPJ_FUNDO%3A11.286.399%2F0001-35&resource_id=92741280-58fc-446b-b436-931faaca4fb4", "next": "/api/action/datastore_search?q=CNPJ_FUNDO%3A11.286.399%2F0001-35&offset=100&resource_id=92741280-58fc-446b-b436-931faaca4fb4"}}}'
我需要像 this image 这样的结果
最佳答案
- load a CKAN dataset from web
您链接的网站在链接“API de Dados”中有一个 Python 示例:
import urllib
url = 'http://dados.cvm.gov.br/api/action/datastore_search?resource_id=92741280-58fc-446b-b436-931faaca4fb4&limit=5&q=title:jones'
fileobj = urllib.urlopen(url)
print fileobj.read()
- transform this dataset into a pandas dataframe
像处理任何 JSON 数据集一样,解析它并加载到数据帧中(这里没有任何特定于 ckan 的内容):
>>> import pandas as pd
>>> import json
>>> response = json.loads(fileobj.read())
>>> pd.DataFrame(response['result']['records'])
CAPTC_DIA CNPJ_FUNDO DT_COMPTC NR_COTST RESG_DIA \
0 0.00 00.017.024/0001-53 2017-07-03T00:00:00 1 0.00
1 0.00 00.017.024/0001-53 2017-07-04T00:00:00 1 0.00
2 0.00 00.017.024/0001-53 2017-07-05T00:00:00 1 0.00
3 0.00 00.017.024/0001-53 2017-07-06T00:00:00 1 0.00
4 0.00 00.017.024/0001-53 2017-07-07T00:00:00 1 0.00
VL_PATRIM_LIQ VL_QUOTA VL_TOTAL _id
0 1111752.99 25.249352000000 1111831.24 1
1 1112087.29 25.256944400000 1112268.26 2
2 1112415.28 25.264393500000 1112716.06 3
3 1112754.06 25.272087600000 1113165.75 4
4 1113096.62 25.279867600000 1113293.06 5
And i need have a register in ckan website to query the data?
您不需要在您链接的网站上注册,我无需注册即可检索数据。我更喜欢使用 requests
库:
import requests
import pandas as pd
params = params={
'resource_id': '92741280-58fc-446b-b436-931faaca4fb4',
'limit': 5,
}
url = 'http://dados.cvm.gov.br/api/action/datastore_search'
r = requests.get(url, params=params).json()
df = pd.DataFrame(r['result']['records'])
看起来像 limit
and offset
parameters probably behave like in SQL 。您可能必须将列转换为数字/日期类型,同样,这并不是 ckan 特有的,您可以在 pandas 文档中找到有关如何执行此操作的答案。
>>> df.describe()
_id
count 5.000000
mean 3.000000
std 1.581139
min 1.000000
25% 2.000000
50% 3.000000
75% 4.000000
max 5.000000
转换很容易:
>>> for col in ('CAPTC_DIA', 'NR_COTST', 'RESG_DIA', 'VL_PATRIM_LIQ', 'VL_QUOTA', 'VL_TOTAL'):
... df[col] = pd.to_numeric(df[col])
>>> df['DT_COMPTC'] = pd.to_datetime(df['DT_COMPTC'])
>>> df.describe()
CAPTC_DIA NR_COTST RESG_DIA VL_PATRIM_LIQ VL_QUOTA VL_TOTAL \
count 5.0 5.0 5.0 5.000000e+00 5.000000 5.000000e+00
mean 0.0 1.0 0.0 1.112421e+06 25.264529 1.112655e+06
std 0.0 0.0 0.0 5.303356e+02 0.012045 6.123444e+02
min 0.0 1.0 0.0 1.111753e+06 25.249352 1.111831e+06
25% 0.0 1.0 0.0 1.112087e+06 25.256944 1.112268e+06
50% 0.0 1.0 0.0 1.112415e+06 25.264394 1.112716e+06
75% 0.0 1.0 0.0 1.112754e+06 25.272088 1.113166e+06
max 0.0 1.0 0.0 1.113097e+06 25.279868 1.113293e+06
_id
count 5.000000
mean 3.000000
std 1.581139
min 1.000000
25% 2.000000
50% 3.000000
75% 4.000000
max 5.000000
关于python - 加载CKAN数据集,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/45418664/
我想要显示正在加载的 .gif,直到所有内容都已加载,包括嵌入的 iframe。但是,目前加载 gif 会在除 iframe 之外的所有内容都已加载后消失。我怎样才能让它等到 iframe 也加载完毕
首先,这是我第一次接触 Angular。 我想要实现的是,我有一个通知列表,我必须以某种方式限制 limitTo,因此元素被限制为三个,在我单击按钮后,其余的应该加载。 我不明白该怎么做: 设置“ V
我正在尝试在我的设备上运行这个非常简单的应用程序(使用 map API V2),并且出于某种原因尝试使用 MapView 时: 使用 java 文件: public class MainMap e
我正在使用 Python 2.6、Excel 2007 Professional 和最新版本的 PyXLL。在 PyXLL 中加载具有 import scipy 抛出异常,模块未加载。有没有人能够在
我想做这个: 创建并打包原始游戏。然后我想根据原始游戏中的蓝图创建具有新网格/声音/动画和蓝图的其他 PAK 文件。原始游戏不应该知道有关其他网格/动画/等的任何信息。因此,我需要在原始游戏中使用 A
**摘要:**在java项目中经常会使用到配置文件,这里就介绍几种加载配置文件的方法。 本文分享自华为云社区《【Java】读取/加载 properties配置文件的几种方法》,作者:Copy工程师。
在 Groovy 脚本中是否可以执行条件导入语句? if (test){ import this.package.class } else { import that.package.
我正在使用 NVidia 视觉分析器(来自 CUDA 5.0 beta 版本的基于 eclipse 的版本)和 Fermi 板,我不了解其中两个性能指标: 全局加载/存储效率表示实际内存事务数与请求事
有没有办法在通过 routeProvider 加载特定 View 时清除 Angular JS 存储的历史记录? ? 我正在使用 Angular 创建一个公共(public)安装,并且历史会积累很多,
使用 Xcode 4.2,在我的应用程序中, View 加载由 segue 事件触发。 在 View Controller 中首先调用什么方法? -(void) viewWillAppear:(BOO
我在某些Django模型中使用JSONField,并希望将此数据从Oracle迁移到Postgres。 到目前为止,当使用Django的dumpdata和loaddata命令时,我仍然没有运气来保持J
创建 Nib 时,我需要创建两种类型:WindowNib 或 ViewNib。我看到的区别是,窗口 Nib 有一个窗口和一个 View 。 如何将 View Nib 加载到另一个窗口中?我是否必须创建
我想将多个env.variables转换为静态结构。 我可以手动进行: Env { is_development: env::var("IS_DEVELOPMENT")
正如我从一个测试用例中看到的:https://godbolt.org/z/K477q1 生成的程序集加载/存储原子松弛与普通变量相同:ldr 和 str 那么,宽松的原子变量和普通变量之间有什么区别吗
我有一个重定向到外部网站的按钮/链接,但是外部网站需要一些时间来加载。所以我想添加一个加载屏幕,以便外部页面在显示之前完全加载。我无法控制外部网站,并且外部网站具有同源策略,因此我无法在 iFrame
我正在尝试为我的应用程序开发一个Dockerfile,该文件在初始化后加载大量环境变量。不知何故,当我稍后执行以下命令时,这些变量是不可用的: docker exec -it container_na
很难说出这里问的是什么。这个问题是含糊的、模糊的、不完整的、过于宽泛的或修辞性的,无法以目前的形式得到合理的回答。如需帮助澄清此问题以便重新打开它,visit the help center 。 已关
我刚刚遇到一个问题,我有一个带有一些不同选项的选择标签。 现在我想检查用户选择了哪些选项。 然后我想将一个新的 html 文件加载到该网站(取决于用户选中的选项)宽度 javascript,我该怎么做
我知道两种保存/加载应用程序设置的方法: 使用PersistentStore 使用文件系统(存储,因为 SDCard 是可选的) 我想知道您使用应用程序设置的做法是什么? 使用 PersistentS
我开始使用 Vulkan 时偶然发现了我的第一个问题。尝试创建调试报告回调时(验证层和调试扩展在我的英特尔 hd vulkan 驱动程序上可用,至少它是这么说的),它没有告诉我 vkCreateDeb
我是一名优秀的程序员,十分优秀!