hive transform Python采坑全纪录

最近在搞一些数据挖掘的东西。之前写的Python代码要放到hive上运行。记录一下踩的坑。

1. add、transform权限问题。
找了半天没有中文解决方案,只有英语解决方案,顺着找到了官方文档(英文):SQL Standard Based Hive Authorizationhttps://cwiki.apache.org/confluence/display/Hive/SQL+Standard+Based+Hive+Authorization#SQLStandardBasedHiveAuthorization-RestrictionsonHiveCommandsandStatements但是我照着改了配置,hive重启,然后崩了。。
hive只好退回改配置之前的版本。
后来同事改了个什么配置,现在又能用了。。

2. add file 的地址。
我add file 后面加本地服务器的地址貌似不行,需要先把文件上传到hdfs上。
hdfs dfs -put /usr/opt/datas/...../hive_unflo

hive transform Python采坑全纪录最先出现在Python成神之路

版权声明:
作者:dingding
链接:https://www.techfm.club/p/24547.html
来源:TechFM
文章版权归作者所有,未经允许请勿转载。

THE END
分享
二维码
< <上一篇
下一篇>>