首先語句上很簡單,
sqoop export \
--connect jdbc:mysql://192.0.0.1:13308/test?characterEncoding=UTF-8 \
--username cxk \
--password jinitaimei \
--table test_table \
--columns a,b,c,d,e \
--hcatalog-database hive_database01 \
--hcatalog-table hive_test_table \
--update-key "a,b,c" \
--update-mode allowinsert
allowinsert 既可以根據updatekey更新,也可以將新值插入
updateonly 只更新不插入新值
需要注意的是,mysql上,作爲updatekey的字段必須設置***聯合唯一鍵***或者聯合主鍵,反正就是要有 聯合+唯一 的特性。
UNIQUE KEY `report_cash_unique` (`a`,`b`,`c`),