Elasticsearch卸数和导入数据:使用ESM工具卸数以及导入数据到ES
导入数据到ES命令如下./migrator-linux-amd64-i./dump03.json-n elastic:dd333-w 12--sliced_scroll_size60-b 10--buffer_count50000-d http://16.1.2.99:9200你执行的这条命令是使用ESM (Elasticsearch Migration Tool)工具将本地dump03.json文件中的数据迁移到你指定的 Elasticsearch 集群中。migrator-linux-amd64是 ESM 工具在 Linux 系统下的可执行文件。ESM 是一个开源工具常用于 Elasticsearch 集群间的数据迁移也支持从本地文件导入数据。下面我们来逐一看下每个参数的作用命令参数详解-i ./dump03.json指定输入文件。这是 ESM 之前用-o命令导出的数据文件命令会读取它来进行迁移。-n elastic:dd333目标集群的认证信息。格式为用户名:密码用于访问你指定的 Elasticsearch 集群。-w 12工作进程数。代表同时运行 12 个并发任务来迁移数据数值越高迁移速度越快但也会消耗更多系统资源。--sliced_scroll_size60切片滚动大小。这是针对 Elasticsearch 5.0 以上版本的优化参数通过将数据分成多个切片并行读取来提升效率。官方建议该值大于 1你设置的 60 是一个常用的值。-b 10批量操作的大小。指每次_bulkAPI 请求发送的文档数量。--buffer_count50000缓冲区文档数量。指内存中缓冲的最大文档数达到此数值后会触发一次批量写入用于平衡内存使用和写入效率。-d http://16.1.2.99:9200目标集群地址。指定数据要迁移到的 Elasticsearch 集群的 IP 和端口。补充说明关于 ESM 工具数据量限制ESM 非常适合一次性、大规模的数据迁移。但与之前提到的 ES|QL 不同ESM 没有 10,000 行的硬性限制能够处理更大的数据集。性能影响数据迁移会消耗源端和目标端集群的资源。官方建议在业务低峰期进行操作并监控集群的 CPU 和内存指标。版本兼容ESM 的一个主要优势是支持不同版本Elasticsearch 之间的数据迁移。总的来说你正通过 ESM 工具利用 12 个并发进程以每次 10 条、缓冲区 50000 条的方式将本地dump03.json文件中的数据高效地导入到http://16.1.2.99:9200这个 Elasticsearch 集群中。从es中卸数查看命令如下./esm-s http://11.23.71:9200-x arm_ipt_system_2026-melastic:dd333-o./dump02.json--refresh这个命令是使用ESM (Elasticsearch Migration Tool)将Elasticsearch索引中的数据导出并保存到本地文件的。下面为你逐一解释命令中每个参数的含义./esm: 执行当前目录下的 ESM 工具程序。-s http://11.23.71:9200: 指定源SourceElasticsearch 服务器的地址。-x arm_ipt_system_2026: 指定要操作的索引Index名称。注意ESM通常一次只能处理一个索引。-m elastic:dd333: 为源 Elasticsearch 提供认证Auth信息格式为用户名:密码。-o./dump02.json: 指定输出文件Output file的路径和名称。数据会被导出到这个文件中。--refresh: 在迁移或导出操作完成后刷新Refresh索引使新数据对搜索可见。总结来说这个命令的作用是使用密码dd333以用户elastic的身份连接到地址为http://11.23.71:9200的 Elasticsearch 服务器将名为arm_ipt_system_2026的索引中的所有数据导出并保存到当前目录下的dump02.json文件中。操作完成后会刷新索引。导出的dump02.json文件之后可以通过 ESM 的-i参数导入到其他 Elasticsearch 集群中。

相关新闻

废话博客第一弹

废话博客第一弹

Q:为什么学习C语言?A:非全跨考408考研需要。Q:打算学多久?A:按照当前比特老师的教程,个人预计2个月内学习结束。Q:掌握到什么程度?A:可以独立完成3~4个个人项…

2026/7/24 13:37:04阅读更多 →
AI内容检测超标抢救指南:48小时技术文档改写实战

AI内容检测超标抢救指南:48小时技术文档改写实战

1. 项目背景与问题定义最近在内容创作圈子里,一个棘手的问题正在被频繁讨论:当一篇文章的AI生成比例超过70%时,是否还有挽救的可能?作为经历过这个困境的从业者,我不得不承认,这个问题比想象中要复杂得多。…

2026/7/24 13:37:04阅读更多 →
Django毕业设计-基于 Django 的高校教材信息管理系统设计与实现 校园教材申领发放管理平台的设计与实现(源码+LW+部署文档+全bao+远程调试+代码讲解等)

Django毕业设计-基于 Django 的高校教材信息管理系统设计与实现 校园教材申领发放管理平台的设计与实现(源码+LW+部署文档+全bao+远程调试+代码讲解等)

博主介绍:✌️码农一枚 ,专注于大学生项目实战开发、讲解和毕业🚢文撰写修改等。全栈领域优质创作者,博客之星、掘金/华为云/阿里云/InfoQ等平台优质作者、专注于Java、小程序技术领域和毕业项目实战 ✌️技术范围:&am…

2026/7/24 13:37:04阅读更多 →
白宫后量子行政令落地:后量子迁移正式进入行动阶段

白宫后量子行政令落地:后量子迁移正式进入行动阶段

1. 引言 2026 年 6 月 22 日,特朗普总统签署了第 14412 号行政令——《保护国家免受高级密码攻击》。该行政令要求联邦机构在 2030 年 12 月 31 日前,将其最敏感的系统迁移到后量子加密;并在 2031 年 12 月 31 日前完成后量子认证迁移。行政令…

2026/7/24 18:20:14阅读更多 →
Allegro5多语言绑定实战:Python与LuaJIT游戏开发指南

Allegro5多语言绑定实战:Python与LuaJIT游戏开发指南

1. 项目概述:为什么需要Allegro5的多语言绑定?如果你是一个游戏开发者或者多媒体应用的爱好者,可能对Allegro这个名字并不陌生。Allegro是一个老牌且强大的跨平台多媒体库,尤其在2D游戏开发领域有着深厚的历史和广泛的社区基础。A…

2026/7/24 18:20:14阅读更多 →
工业相机品牌挑选攻略:聚焦2D画质、线阵稳定性、面阵性价比

工业相机品牌挑选攻略:聚焦2D画质、线阵稳定性、面阵性价比

工业相机是机器视觉系统的“眼睛”——这颗眼睛不仅要看得清,还要在强光、粉尘、振动、高温、强电磁干扰的工业现场看得稳、看得久。2D面阵相机、线阵相机、高精度面阵相机,三类产品对应着完全不同的技术路线与选型标准:选错了,轻…

2026/7/24 18:20:14阅读更多 →
Linux 零基础教程 RPM YUM 52-54

Linux 零基础教程 RPM YUM 52-54

Linux 零基础教程 RPM YUM 52-54 一、参考资料 【Linux零基础教程,linux安装部署(虚拟机、Shell脚本、云服务器)】 https://www.bilibili.com/video/BV19W4y1w7cM/?p52&share_sourcecopy_web&vd_source855891859b2dc554eace9de3f28b…

2026/7/24 18:20:14阅读更多 →
技术写作与知识沉淀方法论:从信息碎片到个人品牌的系统化构建

技术写作与知识沉淀方法论:从信息碎片到个人品牌的系统化构建

文章目录 每日一句正能量 一、引言:为什么技术人必须掌握写作与知识管理 二、知识管理全景:从输入到输出的闭环模型 2.1 知识管理四象限模型 2.2 P.A.R.A 知识组织框架 2.3 卡片笔记法:知识的最小原子单元 三、写作框架:从选题到发布的金字塔工作流 3.1 技术写作五层金字塔…

2026/7/24 18:20:14阅读更多 →
HarmonyOS开发实战:小分享-HAR 与 HSP 共享包的发布与依赖

HarmonyOS开发实战:小分享-HAR 与 HSP 共享包的发布与依赖

HarmonyOS开发实战:小分享-HAR 与 HSP 共享包的发布与依赖 前言 HAR(静态共享包) 和 HSP(动态共享包) 是 HarmonyOS 模块化开发的核心技术。HAR 在编译时打包到 HAP 中,HSP 在运行时动态加载。小分享 App …

2026/7/24 18:18:14阅读更多 →
Go语言静态资源打包方案对比与实践指南

Go语言静态资源打包方案对比与实践指南

1. 项目背景与核心需求在Go语言开发中,我们经常需要处理静态资源文件的打包问题。无论是Web应用的模板文件、前端资源,还是配置文件、证书等,都需要随程序一起分发。传统做法是将这些文件与编译后的二进制文件放在同一目录下,但这…

2026/7/24 0:58:53阅读更多 →
Go语言实现高性能LDAP认证服务的架构与实践

Go语言实现高性能LDAP认证服务的架构与实践

1. 项目背景与核心价值LDAP(轻量级目录访问协议)作为企业级身份认证的黄金标准,已经服务了超过80%的财富500强公司。我在金融科技领域实施统一认证体系时,发现传统Java方案存在启动慢、内存占用高等痛点。而Go语言凭借其协程并发模…

2026/7/24 0:58:53阅读更多 →
【AI面试官实战指南】:用ChatGPT模拟10类高频技术岗面试,3天提升应答精准度92%

【AI面试官实战指南】:用ChatGPT模拟10类高频技术岗面试,3天提升应答精准度92%

更多请点击: https://intelliparadigm.com 第一章:AI面试官实战指南的核心价值与适用场景 AI面试官并非替代人类HR的“黑箱工具”,而是以可解释、可审计、可迭代的方式,赋能招聘全链路的关键基础设施。其核心价值在于将主观经验沉…

2026/7/24 0:58:53阅读更多 →
我的编程之路:第一篇博客

我的编程之路:第一篇博客

大家好,我是一名编程初学者,同时这也是我编程学习之路上的第一篇博客。在这里,我想要向大家介绍我的一些想法和规划。a.自我介绍我是一个刚刚接触编程的新手,目前在学习c语言,我对编程世界充满了强烈的好奇。当然&…

2026/7/24 0:00:06阅读更多 →
【LeetCode 54】螺旋矩阵

【LeetCode 54】螺旋矩阵

问题描述: 解法: 1、模拟(参考自【LeetCode 54】螺旋矩阵-CSDN博客) int *spiralOrder(int **matrix, int matrixSize, int *matrixColSize, int *returnSize) {static const int dirs[4][2] {{0, 1}, {1, 0}, {0, -1}, {-1, …

2026/7/24 0:00:06阅读更多 →
2026 WAIC:模型隐身、智能体疯野,厂商竞赛聚焦办公场景与商业闭环

2026 WAIC:模型隐身、智能体疯野,厂商竞赛聚焦办公场景与商业闭环

知春路不相信模型领先今年WAIC大会,昔日AI六小龙来了五家,分别是Kimi、阶跃星辰、Minimax、百川智能、零一万物。连放弃基模的百川和零一万物都来了,唯一缺席的竟是近几个月来风光无限的智谱。(DeepSeek一直不参加)WAI…

2026/7/24 0:00:06阅读更多 →
YOLOv8推理性能优化:从1.2FPS到35FPS的全链路加速实践

YOLOv8推理性能优化:从1.2FPS到35FPS的全链路加速实践

如果你在部署 YOLOv8 时,发现推理速度只有可怜的 1-2 FPS,而别人的演示视频却能跑到 30 FPS 以上,那么问题很可能不在模型本身,而在于你的整个处理链路。很多开发者拿到一个训练好的 YOLOv8 模型后,会直接使用官方示例…

2026/7/23 22:58:43阅读更多 →
Coze与Dify对比指南:低代码AI应用开发从入门到实战

Coze与Dify对比指南:低代码AI应用开发从入门到实战

1. 从零到一:为什么你需要了解 Coze 和 Dify?如果你对 AI 应用开发感兴趣,但一看到“大模型”、“智能体”、“工作流”这些词就头疼,觉得门槛太高,那这篇文章就是为你准备的。很多开发者,包括我自己&#…

2026/7/23 18:58:18阅读更多 →
AI生图工具怎么选?2026年6月版实测对比

AI生图工具怎么选?2026年6月版实测对比

做自媒体的朋友应该都有体会:配图一直是个让人头疼的问题。2026年,AI生图工具已经非常成熟了,但工具太多反而不知道怎么选。以下是截至2026年6月我对主流AI生图工具的实测对比。Midjourney V8.1:速度之王2026年6月11日&#xff0c…

2026/7/23 18:58:18阅读更多 →