Spark操作Hive分区表

(183) 2024-03-14 12:01:01

前些天发现了一个巨牛的人工智能学习网站,通俗易懂,风趣幽默,忍不住分享一下给大家。点击跳转到网站:https://www.captainai.net/dongkelun

前言

前面学习总结了Hive分区表,现在学习总结一下Spark如何操作Hive分区表,包括利用Spark DataFrame创建Hive的分区表和Spark向已经存在Hive分区表里插入数据,并记录一下遇到的问题以及如何解决。

1、Spark创建分区表

只写主要代码,完整代码见附录

val data = Array(("001", "张三", 21, 
THE END

发表回复