如何阅读Elasticsearch Snapsh

Question

我想复制我的elasticsearch集群的内容到我的数据湖，以便加入。目前，我正在做这个购买扫描整个索引每小时和建设一套新的拼花从他们。当正在进行报废时，这个过程是缓慢的、昂贵的，而且对集群来说是困难的。你知道吗

我假设elasticsearch创建快照比让几十个客户端同时进行扫描调用更容易。所以我想做一个索引的快照，把它水平地分到许多工人中间，然后让这些工人生产镶木地板。你知道吗

问题是我的集群由aws的elasticsearch服务托管，它不提供纯文本快照。我不知道如何读取标准快照格式而不将其加载到另一个elasticsearch集群中。我希望能够在水平伸缩的工作线程池中从一个轻量级python或java进程读取快照。你知道吗

是否可以读取elasticsearch快照而不将其加载到elasticsearch中？你知道吗

Answer 1

es快照，读取必须加载的数据，还可以将数据文件复制到新es的数据路径，es可以自动加载数据

PUT _snapshot/my_backup 
{
    "type": "fs", 
    "settings": {
        "location": "/mount/backups/my_backup" 
    }
}