CKAN数据存储区API记录数限制为1500

时间:2014-04-25 14:40:08

标签: ckan

我已将.xls文件作为数据集资源上传到我的ckan实例,并且使用其完整内容下载它没有任何问题。

问题是在预览表中只显示前1500行(该文件包含23 000行)。从ckan数据存储区API中提取记录时会出现同样的问题。

以下请求返回前1500条记录(按预期方式):

{domain url}/api/3/action/datastore_search?limit=1500&resource_id=413f4b95-a49c-4ae2-a6e2-1c9a8d2ab984

但是当我试图找到接下来的1500条记录时,没有返回任何记录!

{domain url}/api/3/action/datastore_search?offset=1500&limit=1500&resource_id=413f4b95-a49c-4ae2-a6e2-1c9a8d2ab984

我的问题:是否可以上传到数据存储区的记录数量有限制?我在ckan.org,官方文档(http://docs.ckan.org/en/latest/)或邮件列表(https://lists.okfn.org/mailman/listinfo/ckan-dev)中找不到相关信息。有没有可以配置的配置?

我安装了CKAN 2.1。

1 个答案:

答案 0 :(得分:0)

我认为数据存储记录没有任何限制。我们成功上传了inventory.data.gov

上的400多万条记录

点击此处,预览可能需要更长时间才能加载

https://inventory.data.gov/dataset/national-center-for-education-statistics-nces-integrated-postsecondary-education-data-system-ipeds-a/resource/6d2a0324-5964-44c3-97be-061c0eb5fcc9

https://inventory.data.gov/dataset/veterans-burial-sites-1404404968/resource/53a0824d-2236-4c22-9dc8-9ac59b05285d

说过我们确实注意到了你提到的行为......我猜它最有可能是因为上传过程中发生了一些错误。您可以在编辑资源页面上的数据存储选项卡下查看确切的详细信息。