原创 什麼是HBase ?所有的基礎都在這兒了

2006 年10 月Google 發佈三架馬車之一的《Bigtable:A Distributed Storage System for Strctured Data》論文之後,Powerset 公司就宣佈 HBase 在 Hadoop

原创 大數據開發過程中的5個基本步驟

大數據的開發過程,如圖1-1所示。 圖 1-1大數據開發通用步驟圖 上圖只是一個簡化後的步驟和流程,實際開發中,有的步驟可能不需要,有的還需要增加步驟,有的流程可能更復雜,因具體情況而定。 下面以Google搜索引擎爲例,來說明以上步驟

原创 年薪80萬不一定當黑客,轉型大數據開發是更好的選擇!

在這個時代,你的工作會背叛你,你的行業會背叛你,你的專業會背叛你,唯一不能背叛你的,是你的認知和你的能力! 最近熱劇《都挺好》這部劇的確反響很大,很現實,劇中的蘇明哲本身也是IT出身,他已經到了中年,應該都知道做IT這一塊的到了30歲後的

原创 沒有編程基礎,該怎麼學習大數據開發呢?學習線路是怎麼樣的?

大數據作爲一個新興的熱門行業,吸引了很多人,但是對於大數據新手來說,按照什麼路線去學習,才能夠學習好大數據,實現從大數據菜鳥到高手的轉變。這是很多想要學習大數據的朋友們想要了解的。 今天我們就來和大家分享下大數據新手從0開始學習大數據,實

原创 在大數據裏讀懂京東,你東哥爲啥要裁員降薪?

1、京東的賺錢公式 京東是一家電商公司。 電商公司的變現方式,主要還是靠電商銷售產生利潤。大致的賺錢思路: 淨利潤=流量*轉化率*客單價*毛利潤率 -管理成本 這其中,流量是很重要的,就好比你開門做生意,有沒有客人光臨,是衡量生意有沒有得

原创 請查收!你收到一份月薪30k的大數據開發修煉指南

經常有初學者問我,自己想往大數據方向發展,該學哪些技術,學習路線是什麼樣的,覺得大數據很火,就業很好,薪資很高。如果自己很迷茫,爲了這些原因想往大數據方向發展,也可以,那麼我就想問一下,你的專業是什麼,對於計算機/軟件,你的興趣是什麼?

原创 Google工程師是怎麼處理大規模數據的?

毫無疑問,Google是公認的大數據鼻祖。如今很多人提起大數據,還停留在 Google 開啓的“三駕馬車”時代:Google FS、MapReduce、BigTable。其實,“三駕馬車”早已不是浪潮之巔。 近年來,大數據技術的發展,不論

原创 Kafka如何實現每秒上百萬的超高併發寫入?掌握好面試給你打滿分!

這篇文章來聊一下 Kafka 的一些架構設計原理,這也是互聯網公司面試時非常高頻的技術考點。 Kafka 是高吞吐低延遲的高併發、高性能的消息中間件,在大數據領域有極爲廣泛的運用。配置良好的 Kafka 集羣甚至可以做到每秒幾十萬、上百萬

原创 大數據入門到精通學習寶典

大數據處理技術怎麼學習呢?在做大數據開發之前,因爲Hadoop是高層次的語言開發,需要懂得Java或者Python,很快的就能上手。 其實大數據並不是一種概念,而是一種方法論。簡單來說,就是通過分析和挖掘全量的非抽樣的數據輔助決策。大數據

原创 我是業務程序員,半年成功轉型大數據開發

如果程序員只懂編程,其生存空間會越來越窄,發展也會處處受限。 互聯網公司,開發人員的日常工作任務,大致有如下幾類: 1. 產品人員需求(業務開發); 2. 運營人員需求(活動); 3. 以及技術團隊自身技術更迭; 從主動性來看,可能只有

原创 【大數據】什麼是數據倉庫?

閱讀文本大概需要 3 分鐘。 數據庫我們大家都知道,在平時的 Web 開發中用到的比較多。但是數據倉庫是什麼呢?他倆有啥區別呢?在開始之前先分享一個小故事: 1. 在很久很久以前,世界上生活着許多種族,有人類,有矮人,有精靈......他

原创 大數據時代:數據告訴你,爲何說起奧特曼,大家想到的都是迪迦!

於很多的小夥伴而言,日本真人特攝劇《奧特曼》系列是大家童年生活中記憶非常的深刻的存在吧!雖然從劇情的角度來說,奧特曼的劇情從現在來看確實是相當的幼稚,但是對於當時還是孩子的我們而言,這樣充滿了英雄主義的作品還是相當的帶感而又熱血的。  

原创 像數據科學家一樣思考:12步指南(中)

7-工程產品 下一步是建立統計軟件。如果統計是分析和從數據中得出結論的框架,那麼軟件就是將這個框架付諸行動的工具。數據科學家必須爲任何項目做出許多軟件選擇。如果你有一個喜歡的軟件,這通常是一個不錯的選擇,但是有充分的理由去挑選別的東西。

原创 2019年最全的大數據學習大綱總結,持續更新.....

一,題記 要說當下IT行業什麼最火?ABC無出其右。所謂ABC者,AI + Big Data + Cloud也,即人工智能、大數據和雲計算(雲平臺)。每個領域目前都有行業領袖在引領前行,今天我們來討論下大數據Big Data這個方向。  

原创 大數據,物聯網和人工智能的關係

       自從計算機首次發明以來,人們一直在尋找“下一件大事”。現在,由於近一半的世界擁有的手機速度比最早的超級計算機快,因此很難跟蹤我們應該注意的事項。雖然許多利用強大技術的發明幾乎沒有成爲頭條新聞(有人見過智能冰箱嗎?),但是使