hive transform Python采坑全纪录
最近在搞一些数据挖掘的东西。之前写的Python代码要放到hive上运行。记录一下踩的坑。
1. add、transform权限问题。
找了半天没有中文解决方案,只有英语解决方案,顺着找到了官方文档(英文):SQL Standard Based Hive Authorizationhttps://cwiki.apache.org/confluence/display/Hive/SQL+Standard+Based+Hive+Authorization#SQLStandardBasedHiveAuthorization-RestrictionsonHiveCommandsandStatements但是我照着改了配置,hive重启,然后崩了。。
hive只好退回改配置之前的版本。
后来同事改了个什么配置,现在又能用了。。
2. add file 的地址。
我add file 后面加本地服务器的地址貌似不行,需要先把文件上传到hdfs上。
hdfs dfs -put /usr/opt/datas/...../hive_unflo
共有 0 条评论