sqoop操作hive，mysql性能測試

注：前提不屑露公司信息

1、從MySQL同時寫HIVE與HDFS數據

1.1、R

Ø  數據量：36萬

Ø  字段數：6

Ø  寫入耗時：46s

 

1.2、a

Ø  數據量：130萬

Ø  字段數：6

Ø  寫入耗時：46s

 

1.3、H

Ø  數據量：2116萬

Ø  字段數：6

Ø  寫入耗時：90s

 

1.4、l

Ø  數據量：12000萬

Ø  字段數：6

Ø  寫入耗時：300s

 

1.5、O

Ø  數據量：256萬

Ø  字段數：47

Ø  寫入耗時：60s

 

 

 

2、從HIVE寫MySQL數據

2.1、R

Ø  數據量：36萬

Ø  目標表：r_sqooptest

Ø  字段數：6

Ø  寫入耗時：145s

 

 

 

2.2、a

Ø  數據量：130萬

Ø  目標表：aa_sqooptest

Ø  字段數：6

Ø  寫入耗時：536s