原创 推薦的幾本數學書【by DaHua Lin】

1. 線性代數 (Linear Algebra): 我想國內的大學生都會學過這門課程,但是,未必每一位老師都能貫徹它的精要。這門學科對於Learning是必備的基礎,對它的透徹掌握是必不可少的。我在科大一年級的時候就學習了這門課

原创 如何閱讀學術論文

如何閱讀學術論文 讀論文的目的:爲學術會議審覈論文,跟進某個領域,調研某個新領域,等等。 我讀論文的目的:學習與自己研究的相關工作,激發靈感,瞭解前沿方法,瞭解學術界最新、熱門動態。 三步(3-pass)閱讀法 鳥瞰整篇論文

原创 數學在機器學習中的重要性

數學在機器學習中的重要性[by Dahua Lin] Linear Algebra (線性代數) 和 Statistics (統計學) 是最重要和不可缺少的。這代表了Machine Learning中最主流的兩大類方法的基礎。一

原创 對數學的新思考[1]

[轉林達華blog] 在過去的一年中,我一直在數學的海洋中游蕩,research進展不多,對於數學世界的閱歷算是有了一些長進。 爲什麼要深入數學的世界 作爲計算機的學生,我沒有任何企圖要成爲一個數學家。我學習數學的目的,是要

原创 數據分析師的python日記【1】

“誰來給我講講Python?” 作爲無基礎的初學者,只想先大概瞭解一下Python,隨便編個小程序,並能看懂一般的程序,那些什麼JAVA啊、C啊、繼承啊、異常啊通通不懂怎麼辦,於是我找了很多資料,寫成下面這篇日記,希望以完全初學

原创 量化分析師的Python日記【第4天:一大波金融Library來襲之scipy篇】

上一篇介紹了numpy,本篇中着重介紹一下另一個量化金融中常用的庫 scipy   一、SciPy概述 前篇已經大致介紹了NumPy,接下來讓我們看看SciPy能做些什麼。NumPy替我們搞定了向量和矩陣的相關操作

原创 hve 介紹2:數據類型與模型

在上篇文章裏,我列舉了一個簡單的hive操作實例,創建了一張表test,並且向這張表加載了數據,這些操作和關係數據庫操作類似,我們常把hive和關係數據庫進行比較,也正是因爲hive很多知識點和關係數據庫類似。   關係數據庫裏有表

原创 量化分析師的Python日記[第5天:數據處理的瑞士軍刀pandas]

第5天:數據處理的瑞士軍刀pandas 一、Pandas介紹 終於寫到了作者最想介紹,同時也是Python在數據處理方面功能最爲強大的擴展模塊了。在處理實際的金融數據時,一個條數據通常包含了多種類型的數據,例如,股票

原创 大數據語錄 節選

學習大數據,要清楚大數據能做什麼,不擅長做什麼,大數據不是萬金油。 首先粗略瞭解下大數據: 大數據目前的技術和應用都是在數據分析、數據倉庫等方面,主要針對OLAP(OnlineAnalyticalSystem),從技術角度來說,包含我總結

原创 量化分析師的Python日記【第3天:一大波金融Library來襲之numpy篇】

  接下來要給大家介紹的系列中包含了Python在量化金融中運用最廣泛的幾個Library: numpy scipy pandas matplotlib 會給初學者一一介紹 NumPy 簡介   一

原创 數據分析師的python日記[2]

第一天學習了Python的基本操作,以及幾種主要的容器類型,今天學習python的函數、循環和條件、類,這樣纔算對Python有一個大致的瞭解。今天的學習大綱如下: 三、函數 1、定義函數 四、循環與條件 1、if語句

原创 hive介紹1

[轉載 夏天的森林] 我最近研究了hive的相關技術,有點心得,這裏和大家分享下。   首先我們要知道hive到底是做什麼的。下面這幾段文字很好的描述了hive的特性:   1.hive是基於Hadoop的一個數據倉庫工具,可以將

原创 轉載:Map-Reduce的邏輯過程

1、Map-Reduce的邏輯過程 假設我們需要處理一批有關天氣的數據,其格式如下: 按照ASCII碼存儲,每行一條記錄每一行字符從0開始計數,第15個到第18個字符爲年第25個到第29個字符爲溫度,其中第25位是符號+/- 0

原创 歡迎使用CSDN-markdown編輯器

歡迎使用Markdown編輯器寫博客 本Markdown編輯器使用StackEdit修改而來,用它寫博客,將會帶來全新的體驗哦: Markdown和擴展Markdown簡潔的語法 代碼塊高亮 圖片鏈接和圖片上傳 LaTex數學公

原创 十分鐘搞定pandas

http://www.cnblogs.com/chaosimple/p/4153083.html 本文是對pandas官方網站上《10 Minutes to pandas》的一個簡單的翻譯,原文在這裏。這篇文章是對pandas的一個簡