Mysql大批量数据导入ElasticSearch_mysql 5000w数据快速导入elasticsearch-CSDN博客

网站介绍:文章浏览阅读2.9w次,点赞37次,收藏166次。注:笔者环境 ES6.6.2、linux centos6.9、mysql8.0、三个节点、节点内存64G、八核CPU场景:通过Logstash插件批量导数据,个人感觉出现各种奇怪的问题,例如ES 内存暴满,mysql 所在服务器内存暴,最主要的是在一次导数时不能所导的数据量不能太大。经过一次次试探Logstash与优化Logstash导数的最后,终于还是动手直接运用ES提供的api进行导数了..._mysql 5000w数据快速导入elasticsearch