原创 一文讀懂Transformer+源碼復現

本文主要介紹Transformer的原理以及對Transformer的源碼進行閱讀。關於Transformer的原理在上篇《一文讀懂BERT(原理篇)》一文中有較詳細的介紹,讀者可以通過傳送門過去自行閱讀,本片着重對代碼部分進行研究。本文

原创 一文讀懂BERT(從原理到實踐)

一文讀懂BERT(從原理到實踐) 2018年的10月11日,Google發佈的論文《Pre-training of Deep Bidirectional Transformers for Language Understanding》

原创 bash腳本實現批量導入csv文件Mongodb數據庫(win和linux都有)

用 mongoimport方法導入有點有兩個1.穩定 2.速度快   雖然其他代碼也可以實現類似功能,但是性能與穩定性來說還是mongo自帶的方法更好。下面附上方法:打開mongo數據庫1.在windos中,(我是Win10)win中批量

原创 Centos7中用Ambari快速搭建大數據平臺攻略(二)

目錄 一、搭建數據庫 二、製作本地源 (在ambari01.hadoop部署) 三、安裝Ambari (在ambari01.hadoop部署)     在進行上述準備工作後,我們繼續我們的部署工作。前方準備工作參見傳送門:Centos7中

原创 Failed: ambari-server方法彙總及解決方法

假期第二天,適逢北京雨天。原本準備“臥牀聽雨眠“,睡衣惺忪之際,突然感覺有什麼事情忘了。屈指一算,發現還欠着博客的後續文章了。爬起來來辦公室加班整理ing........ 前邊的屬於在Centos7中快速搭建大數據平臺的準備工作,傳送門:

原创 Centos7中用Ambari快速搭建大數據平臺攻略(一)

背景:       因爲業務要求,需要在三臺物理服務器上搭建大數據平臺。經過多方查找資料,最終搭建成功。       鑑於   1)搭建過程中,出現很多小問題,解決起來花費大量的精力和時間                2)解決問題查找資

原创 Centos7中用Ambari快速搭建大數據平臺攻略(三)

前邊兩邊文章已經介紹了,環境準備與ambari的成功安裝,下面我們開始使用Ambari界面安裝Hadoop、spark、Hbase、Log Search等等服務。 前兩篇傳送門:環境準備快速搭建大數據平臺(一)  ambari安裝快速搭建