Python中文
首页
教程
问答
标签
搜索
登录
注册
高效地将数百万个JSON文件添加到一个文件中
回答此问题可获得
20
贡献值,回答如果被采纳可获得
50
分。
<p>我有数百万个json文件,需要将它们作为json dict列表附加到单个json文件中:</p> <p>每个json文件包含以下dict:</p> <pre><code>{ "finent": "abc", "findeplabel": "lbl", } </code></pre> <p>应作为dict列表合并到单个json文件中:</p> ^{pr2}$ <p>使用“cat”命令等的问题是,输入文件数量庞大,最终文件大小可能大于8GB。在</p> <p>无效版本:<code>cat *.json|replace "}\n{" "},{"</code> 那么,合并json文件的最有效方法是什么?最好是并发合并以提高效率?在</p>
0 条评论
分类:
Python问答
请先
登录
后评论
默认排序
时间排序
1 个回答
匿名
1天前
擅长:python、mysql、java
<p>我不能说它的效率,但对于jq来说,它只是一个将所有文件都拖在一起的问题:</p> <pre><code>jq -s '.' *.json </code></pre>
请先
登录
后评论
针对此问题:
更多的回答
关注
89
关注
收藏
1
收藏,
216
浏览
网友 提问于 2天前
相关Python问题
如何在乒乓球比赛中预测球的轨迹,对于AI球拍预测?
9 回答
如何在乒乓球游戏中阻止球
7 回答
如何在乘法和模中不乘空间?
2 回答
如何在乘法和除以2个不同的数字之间进行交换?
2 回答
如何在也是数据一部分的单个字符上拆分大字符串
5 回答
如何在乾草堆中找到針,有更好的解決方案嗎?
5 回答
如何在事件wxWidgets中传递自定义数据
8 回答
如何在事件中使用lambda i=i?
3 回答
如何在事件中心只接收最近的数据
6 回答
如何在事件发生之前保持云函数运行?
7 回答
如何在事件发生后使页面重定向到同一页面
1 回答
如何在事件回调之间保持python生成器的状态
5 回答
如何在事件处理程序(pythonsocket、sphinx)中保留docstring
7 回答
如何在事件处理程序中更改wxRichTextCtrl的光标位置?
1 回答
如何在事件处理程序中访问外部对象?
6 回答
如何在事件循环中将协程打包为正常函数?
6 回答
如何在事件循环之外运行协同程序?
3 回答
如何在事件循环结束时为并发未来的所有线程调用类方法?
2 回答
如何在事件文件中只保留一份摘要?
4 回答
如何在事件模板中添加事件
9 回答