Elasticsearch 迁移工具 ESM 更新 0.4.4
medcl 发表了文章 • 9 个评论 • 4272 次浏览 • 2020-05-14 16:07
ESM 0.4.4 修复一堆 bug,支持几个新的特性:
- 可用于生成测试数据,一般用于压力测试,基于源 ES 或者导入到本地的 JSON 数据,随机修改 ID,可以指定重复次数
- 修复 Routing 参数在不同 ES 版本下的参数差异,支持 1.x\2.x\3.x\5.x 到 6.x\7.x 的相互导入
- 修复终端下不能切换到后台执行的 bug,可以以 crontab 定时执行
- 支持指定 _source 字段导出
- 支持 _source 字段重命名
- 支持文档 _type 重命名
下载地址:
生成测试数据示例:
1.直接以来源 es 的 my_index1 的索引数据生成到目标 es 集群的索引 my_index2,产生 10 份一样的数据
./bin/esm -s -d -x my_index1 -y
my_index2
-n elastic:pass --regenerate_id --repeat_times=10
2.先导出索引文档到本地的文件 dump.json
./bin/esm -s -x my_index1 -o dump.json
再基于这份样本,生成 10 份一样的数据到目标集群./bin/esm -i dunp.json -d -y target-index1 --regenerate_id --repeat_times=10
更多使用示例参照项目 README
有没有用ELK收集数据中心所有网络设备日志的解决方案?
leo_minorui 回复了问题 • 8 人关注 • 9 个回复 • 7043 次浏览 • 2020-11-03 08:19
【直播回放】ElasticTalk #12 Elasticsearch 数据建模
rockybean 发表了文章 • 0 个评论 • 1091 次浏览 • 2019-05-12 08:17
第12期 ElasticTalk 直播已经结束,我们主要分享了在 Elasticsearch 中进行数据建模设计,内容如下:
如果你没来的及参加直播,来看下回放吧!
ElasticTalk 是一个社区的 Webinar 活动,也欢迎感兴趣的伙伴加入,我们的目标如下:
1.研讨 Elastic Stack 的新功能、原理等,使更多的人以更直接的方式掌握其功能
2.锻炼参与者的选题、语言表达及沟通能力
目前是计划每周六下午 2:00 举行一场,形式主要以在线直播为主。
如果你对这个项目感兴趣,欢迎联系我!
招聘时间
我司在大力招聘 Elastic 技术专家,欢迎感兴趣的同学来投简历,地址如下:
想在 Elasticsearch 领域精进的同学,不妨来看看机会,作为 Elastic 官方战略级合作伙伴,我们的培训都是和 Elastic 官方同步的,机不可失!
而我们服务的客户遍布金融、证券、零售、制造业,充满挑战,感兴趣的你快来投递简历吧!
- 数据建模是什么?
- 数据建模的过程有哪些?
- Elasticsearch 数据建模要注意哪些?
如果你没来的及参加直播,来看下回放吧!
ElasticTalk 是一个社区的 Webinar 活动,也欢迎感兴趣的伙伴加入,我们的目标如下:
1.研讨 Elastic Stack 的新功能、原理等,使更多的人以更直接的方式掌握其功能
2.锻炼参与者的选题、语言表达及沟通能力
目前是计划每周六下午 2:00 举行一场,形式主要以在线直播为主。
如果你对这个项目感兴趣,欢迎联系我!
招聘时间
我司在大力招聘 Elastic 技术专家,欢迎感兴趣的同学来投简历,地址如下:
想在 Elasticsearch 领域精进的同学,不妨来看看机会,作为 Elastic 官方战略级合作伙伴,我们的培训都是和 Elastic 官方同步的,机不可失!
而我们服务的客户遍布金融、证券、零售、制造业,充满挑战,感兴趣的你快来投递简历吧!
【直播回放】ElasticTalk #10 Kibana Canvas Intro
rockybean 发表了文章 • 0 个评论 • 1128 次浏览 • 2019-04-27 17:03
第10期 ElasticTalk 直播已经结束,我们主要分享了 Kibana Canvas,内容如下:
如果你没来的及参加直播,来看下回放吧!
ElasticTalk 是一个社区的 Webinar 活动,也欢迎感兴趣的伙伴加入,我们的目标如下:
1.研讨 Elastic Stack 的新功能、原理等,使更多的人以更直接的方式掌握其功能
2.锻炼参与者的选题、语言表达及沟通能力
目前是计划每周六下午 2:00 举行一场,形式主要以在线直播为主。
如果你对这个项目感兴趣,欢迎联系我!
招聘时间
我司在大力招聘 Elastic 技术专家,欢迎感兴趣的同学来投简历,地址如下:
想在 Elasticsearch 领域精进的同学,不妨来看看机会,作为 Elastic 官方战略级合作伙伴,我们的培训都是和 Elastic 官方同步的,机不可失!
而我们服务的客户遍布金融、证券、零售、制造业,充满挑战,感兴趣的你快来投递简历吧!
- Canvas 是什么?
- Canvas 与 Dashboard 的区别
- Canvas 如何上手?
如果你没来的及参加直播,来看下回放吧!
ElasticTalk 是一个社区的 Webinar 活动,也欢迎感兴趣的伙伴加入,我们的目标如下:
1.研讨 Elastic Stack 的新功能、原理等,使更多的人以更直接的方式掌握其功能
2.锻炼参与者的选题、语言表达及沟通能力
目前是计划每周六下午 2:00 举行一场,形式主要以在线直播为主。
如果你对这个项目感兴趣,欢迎联系我!
招聘时间
我司在大力招聘 Elastic 技术专家,欢迎感兴趣的同学来投简历,地址如下:
想在 Elasticsearch 领域精进的同学,不妨来看看机会,作为 Elastic 官方战略级合作伙伴,我们的培训都是和 Elastic 官方同步的,机不可失!
而我们服务的客户遍布金融、证券、零售、制造业,充满挑战,感兴趣的你快来投递简历吧!
ElasticTalk #5 冷热架构那些事儿 直播回放
rockybean 发表了文章 • 0 个评论 • 1766 次浏览 • 2019-03-23 21:47
第5期 ElasticTalk 直播已经结束,我们主要讨论了 Elasticsearch 冷热架构的相关只是,感兴趣的同学可去如下网址观看回放。
ElasticTalk 是一个社区的 Webinar 活动,也欢迎感兴趣的伙伴加入,我们的目标如下:
1.研讨 Elastic Stack 的新功能、原理等,使更多的人以更直接的方式掌握其功能
2.锻炼参与者的选题、语言表达及沟通能力
目前是计划每周六下午 2:00 举行一场,形式主要以在线直播为主。
如果你对这个项目感兴趣,欢迎联系我!
招聘时间
我司在大力招聘 Elastic 技术专家,欢迎感兴趣的同学来投简历,地址如下:
ElasticTalk 是一个社区的 Webinar 活动,也欢迎感兴趣的伙伴加入,我们的目标如下:
1.研讨 Elastic Stack 的新功能、原理等,使更多的人以更直接的方式掌握其功能
2.锻炼参与者的选题、语言表达及沟通能力
目前是计划每周六下午 2:00 举行一场,形式主要以在线直播为主。
如果你对这个项目感兴趣,欢迎联系我!
招聘时间
我司在大力招聘 Elastic 技术专家,欢迎感兴趣的同学来投简历,地址如下:
ElasticTalk #4 ILM 索引生命周期管理直播回放
rockybean 发表了文章 • 4 个评论 • 4402 次浏览 • 2019-03-17 15:19
第4期 ElasticTalk 直播已经结束,我们主要讨论了 Elasticsearch 6.6 新增的 Index Lifecycle Management 功能,感兴趣的同学可去如下网址观看回放。
ElasticTalk 是一个社区的 Webinar 活动,也欢迎感兴趣的伙伴加入,我们的目标如下:
1.研讨 Elastic Stack 的新功能、原理等,使更多的人以更直接的方式掌握其功能
2.锻炼参与者的选题、语言表达及沟通能力
目前是计划每周六下午 2:00 举行一场,形式主要以在线直播为主。
如果你对这个项目感兴趣,欢迎联系我!
ElasticTalk 是一个社区的 Webinar 活动,也欢迎感兴趣的伙伴加入,我们的目标如下:
1.研讨 Elastic Stack 的新功能、原理等,使更多的人以更直接的方式掌握其功能
2.锻炼参与者的选题、语言表达及沟通能力
目前是计划每周六下午 2:00 举行一场,形式主要以在线直播为主。
如果你对这个项目感兴趣,欢迎联系我!
第4期 ElasticTalk 直播已经结束,我们主要讨论了 Elasticsearch 6.6 新增的 Index Lifecycle Management 功能,感兴趣的同学可去如下网址观看回放。
ElasticTalk 是一个社区的 Webinar 活动,也欢迎感兴趣的伙伴加入,我们的目标如下:
1.研讨 Elastic Stack 的新功能、原理等,使更多的人以更直接的方式掌握其功能
2.锻炼参与者的选题、语言表达及沟通能力
目前是计划每周六下午 2:00 举行一场,形式主要以在线直播为主。
如果你对这个项目感兴趣,欢迎联系我!
ElasticTalk 是一个社区的 Webinar 活动,也欢迎感兴趣的伙伴加入,我们的目标如下:
1.研讨 Elastic Stack 的新功能、原理等,使更多的人以更直接的方式掌握其功能
2.锻炼参与者的选题、语言表达及沟通能力
目前是计划每周六下午 2:00 举行一场,形式主要以在线直播为主。
如果你对这个项目感兴趣,欢迎联系我!
【ElasticTalk 直播来袭】Elasticsearch 6.6 之 Index Lifecycle Management Practice
rockybean 发表了文章 • 0 个评论 • 1256 次浏览 • 2019-03-14 17:41
直播时间:
3月16日(本周六) 14:00~15:00
直播内容:
Elastic Stack 已经更新到 6.6 版本,该版本带来很多新功能,比如:
在这些众多功能中,Index Lifecycle Management(索引生命周期管理,后文简称 ILM) 是最受社区欢迎的功能,我们此次研讨会将聚焦该功能,为大家讲解关于 ILM 的概念、原理及实践。
直播方式: 待定(B站或者斗鱼)
直播链接会在开始前发送到讨论群中。
3月16日(本周六) 14:00~15:00
直播内容:
Elastic Stack 已经更新到 6.6 版本,该版本带来很多新功能,比如:
- Index Lifecycle Management
- Frozen Index
- Geoshape based on Bkd Tree
- SQL adds support for Date histograms
- ......
在这些众多功能中,Index Lifecycle Management(索引生命周期管理,后文简称 ILM) 是最受社区欢迎的功能,我们此次研讨会将聚焦该功能,为大家讲解关于 ILM 的概念、原理及实践。
直播方式: 待定(B站或者斗鱼)
直播链接会在开始前发送到讨论群中。
ElasticTalk #3 Elasticsearch压测实战 II esrally 进阶实战
rockybean 发表了文章 • 0 个评论 • 1567 次浏览 • 2018-07-20 19:51
ElasticTalk 第3期 直播的内容是 Elasticsearch 压测实战之 esrally 进阶实战。
本次我们主要讲解了 esrally 如何自定义测试集群、自定义数据集和报告,最后还讲了三步上手 esrally 的方法。
视频地址如下:
本次我们主要讲解了 esrally 如何自定义测试集群、自定义数据集和报告,最后还讲了三步上手 esrally 的方法。
视频地址如下:
ElasticTalk 第3期 直播的内容是 Elasticsearch 压测实战之 esrally 进阶实战。
本次我们主要讲解了 esrally 如何自定义测试集群、自定义数据集和报告,最后还讲了三步上手 esrally 的方法。
视频地址如下:
本次我们主要讲解了 esrally 如何自定义测试集群、自定义数据集和报告,最后还讲了三步上手 esrally 的方法。
视频地址如下: