原创 基於Flume的美團日誌收集系統-----架構和設計
問題導讀： 1.Flume-NG與Scribe對比，Flume-NG的優勢在什麼地方？2.架構設計考慮需要考慮什麼問題？3.Agent死機該如何解決？4.Collector死機是否會有影響？5.Flume-NG可靠性(reliabilit
2019-09-02 23:01:12
1
原创 GitHub上反對996，這些程序員都來自哪裏？
996工作制是指工作日早9點上班，晚上9點下班，中午和晚上休息1小時（或不到），總計10小時以上，並且一週工作6天的工作制度，是非常辛苦且嚴重違反勞動法踐踏人權的工作制度。而作爲互聯網行業的IT程序員們，大部分
2019-03-29 23:15:33
原创 做了十年程序員的蘇明哲被裁掉的真正原因！
作爲一個程序員，在看《都挺好》這部劇的時候可能關注的點不太一樣。別人關注的是家長裏短和每個人的好壞，我卻更關注做了十年程序員被開除的名校畢業生蘇明哲。 清華斯坦福雙名校加持 《都挺好》劇中介紹，蘇明哲本科是清華畢業，研究生考上了美國
2019-03-29 23:15:33
原创 推薦系統的架構圖
推薦系統的架構 本文從互聯網收集並整理了推薦系統的架構，其中包括一些大公司的推薦系統框架（數據流存儲、計算、模型應用），可以參考這些資料，取長補短，最後根據自己的業務需求，技術選型來設計相應的框架。後續持續更新並收集。。。
2019-03-29 23:15:33
33
原创 算法——貝葉斯公式的推導過程
全概率公式，貝葉斯公式推導過程 （1）條件概率公式 設A,B是兩個事件，且P(B)>0,則在事件B發生的條件下，事件A發生的條件概率（conditional probability)爲：
2019-03-29 23:15:33
1
原创 如今的大數據究竟發展到了什麼階段
大數據時代，大數據分析與應用大肆盛行。越來越多的大公司大企業大集團，都越來越重視大數據的影響和作用。可以說，誰想搶得大數據的一手可靠資料，誰就在未來的業務發展和拓寬中佔據優勢，誰就會在相關領域首先拔得頭籌。但是，大數據發展前景現在到底如何
2019-03-27 23:27:26
原创 大數據時代，你的信息安全誰負責？
數據時代的來臨，各項社會活動全面啓動數字化進程，對應的技術應用背後，其信息安全風險也越發突出。 臉書數據門 作爲臉書Facebook的合作伙伴之一，一家名爲“劍橋分析公司”的數據分析企業，創建了一個問答應用“這是你的數字化生活”，並獲得了
2019-03-27 23:27:15
原创 大數據分析的5個方面
越來越多的應用涉及到大數據，不幸的是所有大數據的屬性，包括數量，速度，多樣性等等都是描述了數據庫不斷增長的複雜性。那麼大數據給我們帶來了什麼好處呢？大數據最大的好處在於能夠讓我們從這些數據中分析出很多智能的，深入的，有價值的信息。
2019-03-25 23:14:42
原创 BATJ原來是這樣玩大數據的！
爲什麼國內的大數據應用，只有幾個互聯網巨頭取得成就呢？是因爲它們擁有最多的用戶、流量和數據嗎？ 去年5月筆者曾撰文闡述百度、阿里和騰訊這三個互聯網巨無霸開始挖掘大數據。一年過去，擁有海量數據的公司已在多個領域嘗試對掌握的數據進行利用，大
2019-03-19 23:16:49
原创 大數據崗位最新面試題~3.18
隨着互聯網時代的不斷髮展，現在越來越多的人都選擇從事IT行業，然而能夠在這個行業十幾年，中間只換過兩三次公司，那也算是行業界的一股清流，然而現在的公司並沒有那麼好做，都想進入BATJ,但是發現自己硬是差了很多，就連普通的企業都困難，這是
2019-03-18 23:09:05
2
原创 用大數據算法得出當代移動互聯網人羣圖鑑
《美國隊長2》中，九頭蛇利用算法推算出潛在威脅到自己的敵人。而在移動互聯網時代背景下，大數據根據用戶的過去行爲來分析&預測用戶偏好。在此種環境中被不斷浸染的情況下，結合你對移動互聯網人羣興趣變化特徵的瞭解，能否一眼辨別他們在不同場景的身份
2019-03-13 20:47:27
原创 最新數據顯示：2025年中國將擁有世界最大數據圈
國際數據公司（IDC）2月21日發佈的報告預測，中國數據圈在2025年增至48.6ZB字節，佔全球27.8％，成爲最大數據圈。 IDC昨天發佈了《數字化世界—從邊緣到核心》和《IDC：2025年中國將擁有全球最大的數據圈》兩份白皮書。 報
2019-02-23 21:57:29
原创 分享幾個大數據相關崗位的職責和麪試問題
現在大數據行業如此火爆，國家和企業都需要發展大數據技術，但是人才高度稀缺，企業用人難！ 而大學生們有出現這樣的問題：就業難。有的崗位可能面臨着幾百個人競爭的情況，今天小編帶大家來看看大數據相關崗位的職責和麪試問題有哪些 48903460
2019-02-23 21:57:29
原创 阿里正式向 Apache Flink 貢獻 Blink 源碼
如同我們去年12月在 Flink Forward China 峯會所約，阿里巴巴內部 Flink 版本 Blink 將於 2019 年 1 月底正式開源。今天，我們終於等到了這一刻。 阿里資深技術專家大沙，將爲大家詳細介紹本次開源的
2019-02-19 06:51:58
原创 程序員情人節送這些！
號外！號外！ 一年一度的情（虐）人（狗）節來了！ 但是該有的禮物，驚喜一件也不能少！ 脫單的程序員們，狗糧撒了一地！小姐姐從現場帶來的報道，帶回一地狗糧給吃瓜羣衆們品嚐！ 程序員A君收到了女朋友送的機械鍵盤，看下圖激動的，羨慕死單身汪了
2019-02-14 21:56:32