hive之——lateral view與UDTF

UDTF是什麼:
  • 表生成UDF,接收一個數據行,然後返回多個數據行(一個表作爲輸出)。
    UDTF函數語法:
    • 只允許單獨、使用一個UDTF進行操作。
      eg:select explode(array('A','B','C'));
      輸出:
      A
      B
      C
    • 錯誤示例:
      eg:select col1, explode(array('a','b','c'));
      eg:select explode(array('a','b','c')),explode(array('A','B','C'));
      原因:UDTF函數的輸入是一個表結構,我們沒法用一個單一字段與一個表進行拼接;也不可能將兩張表直接拼接在一起。
一般情況下lateral view與UDTF函數一起使用
  • lateral view語法:
    LATERAL VIEW udtf(expression) tableAlias AS columnAlias (‘,’ columnAlias)*
  • eg:
    select col1,newtable.clo2 from table lateral view explode(array('A','B')) newtable as clo2;
    註釋:
    table——原表
    col1——原表中的字段
    newtable——explode()函數返回的表的別名
    col2——新表中的字段名(newtable中的列名)
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章