Hive优化(提高hive运行速度)

侠哥49620 18 0 PDF 2021-01-31 20:01:36

文章目录一、Hive使用本地模式执行操作(Hive使用资源大于20M的时候还是会采用集群yarn的方式运行)具体设置方法1、设置临时的2、修改hive配置文件(hive-site.xml),永久有效二、 一、Hive使用本地模式执行操作(Hive使用资源大于20M的时候还是会采用集群yarn的方式运行) 将hive的job交给yarn执行太慢,hive支持本地模式 設置本地模式之前的,耗時 9.068 設置本地模式之后的,耗時 0.29 具体设置方法 1、设置临时的 在每次执行hql语句之前 都要先执行下面这句话 set hive.exec.mode.local.auto=true;

用户评论
请输入评论内容
评分:
暂无评论