Sqoop --m(--num-mappers)参数使用及优化_sqoop num-mappers-CSDN博客

网站介绍:Sqoop并行化是启多个map task实现的,-m(或--num-mappers)参数指定map task数,默认是四个。当指定为1时,可以不用设置split-by参数,不指定num-mappers时,默认为4,当不指定或者num-mappers大于1时,需要指定split-by参数。并行度不是设置的越大越好,map task的启动和销毁都会消耗资源,而且过多的数据库连接对数据库本身也会造成压..._sqoop num-mappers