粘糊糊的

Question

我正试图从http://apps.cu-citizenaccess.org/中获取数据

看起来他们试图从JSON中提取数据，所以我使用了类似于Scrapy, scrapping data inside a javascript中建议的代码。你知道吗

我当前的代码（使用python3）是

jsonresponse = json.loads(response.body_as_unicode())
print(jsonresponse["val.restname"])

我想知道这是一个技术上的错误，还是我应该完全做别的？你知道吗

Answer 1

最简单的方法是访问http://apps.cu-citizenaccess.org/restaurants/api/restaurants/?format=json&rest_closed=False处的实际JSON文件？你知道吗

这可以通过googlechrome开发者工具中的network标签找到。你知道吗

最初，页面可能只显示20个条目。因此可以添加一个参数：“limit=1000”。此后，您可以添加“offset=1000”以显示其余条目。你知道吗

然后使用JSON-to-CSV转换器将两个页面转换成CSV格式（如果需要）。这两个CSV文件可以很容易地与Excel等程序合并。你知道吗