Hive 处理 json 数据总体来说有两个方向的路走:
-
将 json 以字符串的方式整个入 Hive 表,然后通过使用 UDF 函数解析已经导入到 hive 中的数据,比如使用
LATERAL VIEW json_tuple
的方法,获取所需要的列名。 -
在导入之前将 json 拆成各个字段,导入 Hive 表的数据是已经解析过的。这将需要使用第三方的
SerDe
。
Hive解析Json数组
https://mp.weixin.qq.com/s/awCvlb9BzCRX-Da1_l1FYg
我们下期见,拜拜!