原创 貓眼發佈電影大數據報告:大數據時代的電影消費洞察

近日,貓眼電影發佈了關於“大數據時代的電影消費洞察”的報告(以下簡稱報告),報告數據分析來源於超5億人次的貓眼電影消費數據和4000家影院數據。報告顯示,2015上半年全國電影票房線上化率超過50%,最受好評的國產片是《戰狼》,進口片是

原创 不同場景下MySQL的遷移方案

一 爲什麼要遷移 MySQL 遷移是 DBA 日常維護中的一個工作。遷移,究其本義,無非是把實際存在的物體挪走,保證該物體的完整性以及延續性。就像柔軟的沙灘上,兩個天真無邪的小孩,把一堆沙子挪向其他地方,鑄就內心神往的城堡。 生

原创 機器學習和統計模型的差異

在各種各樣的數據科學論壇上這樣一個問題經常被問到——機器學習和統計模型的差別是什麼? 這確實是一個難以回答的問題。考慮到機器學習和統計模型解決問題的相似性,兩者的區別似乎僅僅在於數據量和模型建立者的不同。這裏有一張覆蓋機器學習和統

原创 大數據帶來六種全新商業模式

人們認爲“數據是新型石油”,一種需要企業加以利用和改進的天然資源。這是事實還是炒作?Mohamed Zaki解釋說,雖然許多公司已經從大數據中獲益,但這也提出了嚴峻的挑戰。 政府機構已經宣佈加快大數據研究,而且根據Gartne

原创 一小時瞭解數據挖掘③:詳解大數據挖掘的分類技術

數據挖掘分類技術 從分類問題的提出至今,已經衍生出了很多具體的分類技術。下面主要簡單介紹四種最常用的分類技術,不過因爲原理和具體的算法實現及優化不是本書的重點,所以我們儘量用應用人員能夠理解的語言來表述這些技術。 在我們學習這

原创 一小時瞭解數據挖掘①:解析常見的大數據應用案例

簡而言之,數據挖掘(Data Mining)是有組織有目的地收集數據,通過分析數據使之成爲信息,從而在大量數據中尋找潛在規律以形成規則或知識的技術。在本文中,我們從數據挖掘的實例出發,並以數據挖掘中比較經典的分類算法入手,給讀者介紹我們

原创 數據分析系列劇第四集:行業研究報告與生產計劃

在老李的指導下,小蔡畫出了服裝行業研究報告的思路框架(見下圖) 接着小蔡基於該思路撰寫了一份簡要的報告(見下圖)。   周總看完了這份報告,點點頭說:“小蔡,寫的不錯!你對服裝行業已經有了一定了解,接下來我們討論一

原创 數據分析系列劇第二集:七步法的應用

    中秋佳節,小蔡帶上月餅和葡萄到師傅老李家串門。 寒暄之後,大家開始閒聊。 老李:“小蔡,有沒有女朋友呢?” 小蔡:“還沒有呢,我想先有些積蓄,再交女朋友。師傅,我現在是月光族,有什麼樣的方法可以讓我攢更多的錢呢?”  

原创 一小時瞭解數據挖掘②:分類算法的應用和成熟案例解析

分類算法的應用 本節將爲大家介紹數據挖掘中的分類算法在一些行業中的代表性應用。我們將算法應用分爲表述問題和解決過程兩個階段,表述問題即需要運用數據挖掘能夠理解和處理的語言來闡述業務問題,最重要的是能夠用正確且符合實際的方式把業務

原创 深入 HBase 架構解析(2)

前言 這是《深入HBase架構解析(1)》的續,不多廢話,繼續。。。。 HBase讀的實現 通過前文的描述,我們知道在HBase寫時,相同Cell(RowKey/ColumnFamily/Column相同)並不保證在一起,甚至

原创 數據分析:互聯網金融數據分析應用

互聯網金融在國內發展也才2年多的時間,從貨幣基金到P2P到衆籌到股票基金,從傳統ATM和手機銀行短信銀行,感慨這個互聯網金融的到來,讓我們有更多的信息渠道可以來了解金額。 還有像越女讀財介紹的高暴利的錢寶網、MMM、百川幣這些,

原创 一小時瞭解數據挖掘⑤數據挖掘步驟&常用的聚類、決策樹和CRISP-DM概念

數據挖掘有很多不同的實施方法,如果只是把數據拉到Excel表格中計算一下,那只是數據分析,不是數據挖掘。本文主要講解數據挖掘的基本規範流程。CRISP-DM和SEMMA是兩種常用的數據挖掘流程。 數據挖掘的一般步驟 從數據本身來

原创 深入 HBase 架構解析(1)

前記 公司內部使用的是MapR版本的Hadoop生態系統,因而從MapR的官網看到了這篇文文章:An In-Depth Look at the HBase Architecture,原本想翻譯全文,然而如果翻譯就需要各種咬文嚼字,太麻

原创 數據分析系列劇第三集:行業研究

  中秋過後,小蔡拿着他的計劃和周總討論。 小蔡:“周總,這是我放假期間制定的一份工作計劃(見下圖),您看是否需要調整?” 周總接過計劃,看了一會說:“嗯,還不錯!接下來你是要做預測,那說說你的思路吧。” 小蔡:“我們可以從官方或

原创 一小時瞭解數據挖掘④:商務智能原理解讀的數據挖掘九大定律

馬雲在2012年網商大會上的演講中說過:“假如我們有了一個數據預報臺,就像爲企業裝上了一個GPS和雷達,企業的出海將會更有把握。”。這裏的數據預報臺就是下文所述的商業智能。 什麼是商業智能(Business Intelligenc