如何将大容量Elasticsearch索引转移到另一个存储

2024-10-01 00:26:13 发布

您现在位置:Python中文网/ 问答频道 /正文

我想将Elasticsearch中的大量数据克隆到HDFS。我的索引一天大约增长1TB的数据。我已经使用了scrolleasticsearchhttp处理器的Nifi,但是性能非常慢(5分钟内大约32Mb)。我想克隆1TB/1天,所以太慢了

我能做些什么来加快速度

到目前为止我试过的:

  • 我用过scrolleasticsearchhttp
  • Logstash:我想用Logstash

Tags: 数据hdfs处理器elasticsearch性能logstashnifi加快速度