未分類
5 9 月 2020

HIVE 增量数据的问题

HIVE 增量数据的问题

資深大佬 : FenixVu 5

80+表 最大的 200G 目前的问题是 数据是别人公司提供的 全部是外部表 请问这种情况下增量数据的问题怎么解决

大佬有話說 (1)

  • 資深大佬 : ghostviper

    全部是外表是什么意思？？？ hive+hbase 的外表？？？ 如果是类似的外表 更新估计 要以 hbase 为主，hive 默认是不支持 ACID 的；但是 hive 做数据转换和 ETL 很方便