原创 JAVA入門之變量與類型
本篇博客主要是包括如下幾個部分。 關鍵字 標識符 變量 數據類型 類型轉換 1、關鍵字 1.1關鍵字的理解 我理解的關鍵字，被JAVA語言賦予了特殊含義，用作專門用途的單詞。換句話說， 我們在定義一個變量的時候是不允許使用這些
2020-06-17 13:45:42
原创 hive/spark-sql經典筆試面試題（二）連續登錄天數最大
問題描述 在數據倉庫中存在這樣一張表，記錄了2019年所有用戶在哪天登錄了我司的網站或者app。數據如下： 表名：test2 字段：id string，pday string 需求：統計用戶在本年中連續登錄天數最大是幾天？如：
2020-06-17 12:55:29
原创 使用Sqoop將Hive導入Mysql中遇到的問題（特殊字符及類型強轉）
問題一 用戶暱稱包含特殊符號，引起sqoop程序失常： 最近在使用sqoop將Hive中的數據導入Mysql的過程中報錯了。報錯信息如下： 19/05/07 17:28:48 WARN mapreduce.Counters: Gr
2020-06-17 12:55:29
原创 mysql中如何過濾字符串null的同時保留NULL
爲了不浪費大家時間，直接上解決辦法。 解決辦法一： 1 過濾掉’null’的同時將值爲空（NULL）的補充上 select id from table0 where id!='null' or id is null 解決辦法二
2020-06-17 12:55:29
原创 hive/spark-sql經典筆試面試題（一）累加計算
問題描述 在數據倉庫中有這樣一張表，記錄了每個月的營業額，數據如下： 表名：test： 字段：1、month ；2、money 需要統計截止到每個月份的營業總額，如： 截止到2019年1月份營業總額爲10元 截止到2019年2月
2020-06-17 12:55:29
原创 hive中進行增量統計-full join的用法-如何合併表中兩列
我將其他相關不必要的細節隱去,只保留最終的技術點，希望能對以後有需要的朋友提供些許幫助。 最近在進行hive表的統計的時候有這樣的一個需求， hive中增量統計 一 、任務需求： 有這樣的兩個表 table0，table01，
2020-06-17 12:55:29