提问要多花一点心思哦

Elasticsearch数据迁移问题, 从2.x到5.x?

Elasticsearch | 作者 exceptions | 发布于2017年07月20日 | 阅读数：4160
分享到：QQ空间新浪微博微信QQ好友印象笔记有道云笔记
目前有一个数据迁移任务，从2.x版本迁移到5.x版本。尝试过Elasticsearch的_reindex API和elastic-dump这个工具。这两个方法都在数据量小或者数据量不大的情况下能完成，当时数据量比较大就会失败。_reindex是端口连接失败了，elasticdump是突然停掉。现在想考虑快照方式，通过2.x版本将快照备份到hdfs上，5.x能否通过快照恢复数据?有试过这种方案的大神吗?
2017-07-20 添加评论

没有找到相关结果

    已邀请:

    shinehiy

    赞同来自:

    5.x 数据的格式变动，不知道直接通过快照的方式，能不能奏效
    是我的话，手动搞了...批量拉出来，再写入
    2017-07-20 0 0
    分享

    BrickXu - BlackOps@Qunar

    赞同来自:

    snapshot方式是一定OK的，并且数据重新按照新版本结构写入，没那么多屁事。_reindex本身就是knapshot的官方实现，都是scroll + bulk写的，并发一大就reject了，整体数据迁移直接考虑snapshot + restore，没坑。
    2017-07-21 0 2
    分享
    为什么被折叠? 0 个回复被折叠

    要回复问题请先登录或注册

    Copyright © 2024 · CC BY-NC-SA 3.0

    本站服务器及带宽由 提供赞助