原创 05-天亮創業蛻變記之(五):關於應屆大學生求職就業的現狀分析與建議

一、緒言     又值一年應屆大學生畢業季,與其說是畢業季,更應該說是求職季,2018年創歷史新高的820萬大學畢業生,成爲各大網絡媒體、報端、高校會議的頭等話題。各方面都在疾呼要千方百計的爲解決大學生就業問題提供便利,同時企業端

原创 62-天亮大數據系列教程之練手小項目-中門級爬蟲項目

目錄 一、項目背景與目標 二、需求分析 三、主要思路與考點 詳情 一、項目背景與目標 項目背景 在大數據浪潮洶涌澎湃發展的數據時代,如何能夠擁有更多的數據成爲佔領制戰略制高點的關鍵因素。很多大型互聯網公司坐擁千萬級、億級用

原创 51-天亮大數據系列教程之輿情熱點挖掘項目-課堂筆記-8

1、強調之前的2個小問題 內外表的load及其注意事項。 crontab執行時,爲將全部日誌打印,請使用如下模板: cd 腳本所在目錄 && nohup sh shell腳本 >> nohup.out 2>&1 & 2、git

原创 02-IT畢業設計亂局之從小白到老司機修成記之如何正確選擇畢設題目

IT類畢業設計是很多即將畢業的計算機相關專業大學生面臨的共性難題,造成這個問題的原因各種各樣但大體原因還都是心知肚明的, 爲了解決這一難題,同時幫助更多小夥們能夠通過做畢業設計更好的學習進入程序設計的大門, 天亮教育特舉辦“從小白

原创 03-IT畢業設計亂局之從小白到老司機修成記之如何拿高分及往年優秀畢設賞析

IT類畢業設計是很多即將畢業的計算機相關專業大學生面臨的共性難題,造成這個問題的原因各種各樣但大體原因還都是心知肚明的, 爲了解決這一難題,同時幫助更多小夥們能夠通過做畢業設計更好的學習進入程序設計的大門, 天亮教育特舉辦“從小白

原创 01-IT畢業設計亂局之從小白到老司機修成記之標準流程及經典問題剖析

IT類畢業設計是很多即將畢業的計算機相關專業大學生面臨的共性難題,造成這個問題的原因各種各樣但大體原因還都是心知肚明的, 爲了解決這一難題,同時幫助更多小夥們能夠通過做畢業設計更好的學習進入程序設計的大門, 天亮教育特舉辦“從小白

原创 63-天亮大數據經典大數據筆試題系列之數據倉庫建模方法

如何構建數據模型 數據模型的層次的一般劃分 各層次說明 業務建模,生成業務模型,主要解決業務層面的分解和程序化。 領域建模,生成領域模型,主要是對業務模型進行抽象處理,生成領域概念模型。 邏輯建模,生成邏輯模型,主要是將領

原创 61-天亮大數據經典大數據筆試題系列之數據倉庫介紹

一. 數據倉庫介紹 專業定義 英文名稱爲Data Warehouse,可簡寫爲DW。 是爲企業所有級別的決策制定過程,提供所有類型數據支持的戰略集合。 它是單個數據存儲,出於分析性報告和決策支持目的而創建。 爲需要業務智能的企

原创 62-天亮大數據經典大數據筆試題系列之數據倉庫建模介紹

概念定義 數據模型是抽象描述現實世界的一種工具和方法,是通過抽象的實體及實體之間聯繫的形式,來表示現實世界中事務的相互關係的一種映射。 數據模型表現的抽象是實體和實體之間的關係,通過對實體和實體之間關係的定義和描述,來表達實際

原创 59-天亮大數據經典大數據筆試題系列之Kafka工具類之Java實現

工具類意義描述 kafka是最典型、最常用的MQ技術之一,逐漸發展成爲各種生產者消費者組件解耦的中間件。 代碼實現 生產者工具類 package com.tl.job002.kafka; import java.util

原创 60-天亮大數據經典大數據筆試題系列之Kafka工具類之scala實現

工具類意義描述 kafka是最典型、最常用的MQ技術之一,逐漸發展成爲各種生產者消費者組件解耦的中間件。 代碼實現 生產者工具類 package com.tl.job002.kafka import org.apache

原创 58-天亮大數據經典大數據筆試題系列之hbaseIO操作工具類

工具類意義描述 hbase是最典型、最常用的技術之一,幾乎所有的中大型公司均有所涉及,故工具之。 代碼實現 package com.tl.job007.utils; import java.io.IOException

原创 55-天亮大數據經典大數據筆試題系列之工具類之OS信息獲取操作

工具類意義描述 OS信息獲取操作是較典型、較常用的技術之一,在很多數據傳輸項目開發當中均會有所涉及,故工具之。 代碼實現 package com.tianliang.spider.utils; import java.

原创 57-天亮大數據經典大數據筆試題系列之工具類之網頁編碼獲取操作

工具類意義描述 網頁編碼獲取是最典型、最常用的技術之一,在很多數據傳輸、數據採集項目開發當中均會有所涉及,故工具之。 代碼實現 package com.tianliang.spider.utils.charset; i

原创 54-天亮大數據經典大數據筆試題系列之工具類之MD5加密工具類

工具類意義描述 MD5加密操作是最典型、最常用的技術之一,在很多網絡數據傳輸、參數傳遞開發當中均會有所涉及,故工具之。 代碼實現 package com.tianliang.spider.utils; import j