原创 梯度下降的原理與實踐

梯度下降是 首先,我們有一個可微分的函數。這個函數就代表着一座山。我們的目標就是找到這個函數的最小值,也就是山底。最快的下山的方式就是找到當前位置最陡峭的方向,然後沿着此方向向下走,對應到函數中,就是找到給定點的梯度 ,然後朝着梯

原创 RESTful API講解

RESTful風格 REST是REpresentational State Transfer的縮寫(一般中文翻譯爲表述性狀態轉移),REST 是一種體系結構,而 HTTP 是一種包含了 REST 架構屬性的協議,爲了便於理解,我們

原创 git配置(gitee)

這裏僅提供簡單的git使用,詳細內容參考 將本地工程同步保存在git上,這裏採用gitee.github,gitlab同理. 在Windows上安裝Git 在Windows上使用Git,可以從Git官網直接下載安裝程序,(網速慢的

原创 【踩坑無數】本地CDH5.14安裝指南

本文參考內容:https://blog.csdn.net/u010936936/article/details/81939880 一環境: centos 7 64位 二軟件下載: JDK1.8: 下載地址 選擇64位linux C

原创 阿里後筆試的所思所想

阿里筆試爆零 結果是不出意外的,畢竟筆試是趕鴨子上架的,沒有任何前期準備。但這也不能是藉口,畢竟是面試,沒有人聽藉口,沒有做出來就是沒有做出來。接下來就是總結經驗,希望我下次不會這麼狼狽,也希望其他迷茫的面試者看到的能有一點方向。

原创 Apache kylin 入門學習 (1)kylin簡單認識

一kylin框架 Apache Kylin™是一個開源的分佈式分析引擎,提供Hadoop/Spark之上的SQL查詢接口及多維分析(OLAP)能力以支持超大規模數據,最初由eBay Inc. 開發並貢獻至開源社區。它能在亞秒內查詢

原创 Apache kylin 入門學習(2)安裝與簡單測試

下載kylin 安裝包 已部署的HBase, Hive, Yarn並啓動(參考博客CDH安裝)。 在主機上部署 mkdir /usr/local/apps cd /usr/local/apps rz (把包傳到此目錄下) t

原创 ElasticSearch 入門教程 一(體系結構)

全文檢索的介紹 全文檢索的需求介紹 首先我們談幾個公司,如雷貫耳的:百度、谷歌、維基百科;這些公司都有一個相似性就是門戶網站,可以提供我們通過關鍵字搜索,然後快速的檢索出我們想要的信息; 【網頁百度展示】 比如我們檢索關鍵詞,百度

原创 ElasticSearch 入門教程 二(ES集羣搭建與配套軟件安裝)

ES的集羣部署 第一步:創建普通用戶(使用root用戶) 注意:ES不能使用root用戶來啓動,必須使用普通用戶來安裝啓動。這裏我們創建一個普通用戶以及定義一些常規目錄用於存放我們的數據文件以及安裝包等 創建一個es專門的用戶(

原创 Python Scrapy爬蟲教程-更新

在之前我簡單的實現了 Scrapy的基本內容。 存在兩個問題需要解決。 先爬取詳情頁面,在根據頁面url獲取圖片太費事了,要進行簡化,一個項目就實現圖片爬取。 增量爬蟲,網站數據更新,獲取更新內容。 一般爬蟲的邏輯是:給定起始

原创 Hive建表出現 LINES TERMINATED BY only supports newline '\n' right now.解決辦法

Hive建表語句如下: CREATE EXTERNAL TABLE IF NOT EXISTS students ( id int, name string, gender string, birthday Date, cla

原创 Hbase regionserver 報錯 java.lang.NoClassDefFoundError: org/apache/jute/Record

Caused by: java.lang.NoClassDefFoundError: org/apache/jute/Record at org.apache.hadoop.hbase.zookeeper.Recoverable

原创 tensorflow中的crf

crf是什麼 CRFs are a type of discriminative undirected probabilistic graphical model. They are used to encode known re

原创 Neural Architectures for Named Entity Recognition(用於命名實體識別的神經結構)全文翻譯

6## 前言 原文:https://arxiv.org/pdf/1603.01360.pdf 主要使用翻譯軟件:http://fanyi.youdao.com/ 人工修改:https://blog.csdn.net/qq_4183