天天看点

黑猴子的家:Oozie 可能遇到的问题总结

  1. Mysql权限配置

    授权所有主机可以使用root用户操作所有数据库和数据表

    mysql> grant all on . to root@'%' identified by '123456';

    mysql> flush privileges;

    mysql> exit;

  2. workflow.xml配置的时候不要忽略file属性
  3. jps查看进程时,注意有没有bootstrap
  4. 关闭oozie

    如果bin/oozied.sh stop无法关闭,则可以使用kill -9 [pid],之后oozie-server/temp/xxx.pid文件一定要删除。

  5. Oozie重新打包时,一定要注意先关闭进程,删除对应文件夹下面的pid文件。(可以参考第4条目)
  6. 配置文件一定要生效

    起始标签和结束标签无对应则不生效,配置文件的属性写错了,那么则执行默认的属性。

  7. libext下边的jar存放于某个文件夹中,导致share/lib创建不成功。
  8. 调度任务时,找不到指定的脚本,可能是oozie-site.xml里面的Hadoop配置文件没有关联上。
  9. 修改Hadoop配置文件,需要重启集群。一定要记得scp到其他节点。
  10. JobHistoryServer必须开启,集群要重启的。
  11. Mysql配置如果没有生效的话,默认使用derby数据库。
  12. 在本地修改完成的job配置,必须重新上传到HDFS。
  13. 将HDFS中上传的oozie配置文件下载下来查看是否有错误。
  14. Linux用户名和Hadoop的用户名不一致。