原创 區塊鏈和比特幣初步瞭解
最近這幾天區塊鏈被再一次提到了風口，這次不一樣，xxx代言，xxx支持的，作爲一個IT人，應該瞭解下。而且不能太粗略。 一、先過一些基本概念 區塊鏈和比特幣 首先這是兩個概念，區塊鏈是技術範疇，比特幣更像金融範疇。區塊鏈是分佈式數據存
2020-06-15 22:46:21
原创 爲什麼需要NoSQL，NoSQL是什麼
計算機科學中，任何設計都會有理論支撐。數據庫設計自然不會例外。 NoSQL(NoSQL = Not Only SQL )，意即"不僅僅是SQL"。 理論支撐 數據庫分類，簡單分成，關係型數據庫核非關係型數據庫。 沒錯，NoSQL就屬
2020-04-26 11:47:49
12
原创 一個腳本搞定文件合併去重，大數據處理，可以合併幾個G以上的文件
問題： 先講下需求，有若干個文本文件（txt或者csv文件等），每行代表一條數據，現在希望能合併成 1 個文本文件，且需要去除重複行。 分析： 一向奉行簡單原則，如無必要，絕不復雜。 如果數據量不大，那麼如下兩條命令就可以搞定 合併：
2020-04-23 13:40:41
1
原创 protobuf報錯解決：error while loading shared libraries: libprotobuf.so.8: cannot open
運行protobuf程序碰見一個小錯誤，記錄一下： error while loading shared libraries: libprotobuf.so.8: cannot open shared object file: No s
2020-04-23 13:40:41
2
原创 5分鐘瞭解Mysql支持的數據類型
Mysql比較常用，最近剛好用到，順手整體些速記，以備後觀。 對於這些基礎知識，需要熟記於心，故而需要化繁爲簡，化簡爲圖。 每一個常量，變量和參數都有數據類型，它用來指定一定的存儲格式、約束和有效範圍。MySQL 提供了多種數據類型，主要
2020-04-20 08:31:10
原创 快速瞭解：數據庫的分類，OLTP、OLAP與HTAP
爭取一篇文章能講明白一個知識點。 一、概述 我們常用的SQL數據庫一般是OLTP。那麼數據庫有哪些分類呢？ 一般有3種：OLTP、OLAP與HTAP 如果上面這張圖看懂了，下面可以不用看了。 二、詳細描述 下面簡單介紹3種類型的
2020-04-15 17:53:43
6
原创 快速瞭解SQL語言的簡單分類
SQL語言大家再熟悉不過了，這裏談談常見的SQL語句分類，一般按照功能分爲如下4類：數據查詢語言DQL，數據操縱語言DML，數據定義語言DDL，數據控制語言DCL。 常見的增刪改查功能對應的劃分如下： 當然，分法不一，目的是快速全
2020-04-15 17:53:43
1
原创 Centos Mysql安裝及入門
0、背景 有一些知識很簡單，很低頻，但是偶爾還是需要使用，故而需要記下來。 開始的時候碰見mysql.sock文件找不到了，不知道什麼時候被破壞了，修復了好久，問題一個接着一個，需要急着用，很浪費時間，所以直接選擇重裝。簡單暴力有效。
2020-04-01 22:15:55
原创 mysql數據導入和導出，備份和遷移
數據導入導出還是比較常見的， 一、常規數據導入導出 一般如果數據不大，直接操作 *.sql 文件即可。 1、數據導出 ## 導出整個數據庫結構和數據 # mysqldump -h localhost -P 3306 -uroot -p1
2020-04-01 22:15:55
原创 ping和telnet
搞分佈式大數據，還是需要牢固的網絡基礎的，今天覆習下ping和telnet，因爲這兩個最基礎，telnet和ping結合很好查看監控服務器狀態的，很多工具就是依靠這些基本命令來實現監控的 。 （一）使用 ping 可以測試到目標機器的連通
2020-02-21 13:36:55
原创 表徵學習什麼意思？representation learning
representation learning： to learn representations of data that make it easier to extract useful information when buildi
2020-02-21 13:36:55
原创 3步動態新增hadoop節點
問題： hadoop集羣正在運行，怎麼動態加一個新的節點呢？ 解決： 1、修改 master節點上的hadoop配置文件 /home/cc/hadoop-2.8.2/etc/hadoop/slaves 文件，添加新增的節點 slave3
2020-02-21 13:36:55
原创 安裝新版本，全局化的npm和nodejs
我是社會主義的一塊磚，哪裏需要哪裏搬！本週援助一下前端的同學開發： （0）背景知識：先介紹下npm和nodejs，太基礎直接複製了: nodejs 簡單的說 Node.js 就是運行在服務端的 JavaScript。 Node.js 是
2020-02-21 13:36:55
原创 隨機算法：蒙特卡羅算法和拉斯維加斯算法
隨機算法分成兩類： 蒙特卡羅算法：採樣越多，越近似最優解； 拉斯維加斯算法：採樣越多，越有機會找到最優解； 上圖區分記憶一下： 蒙特卡羅是一類隨機方法的統稱，這裏摘一段知乎大神（鵪鶉）的概括：（這些蒙特卡羅的應用，肯定對這些有過深
2020-02-21 13:36:55
原创 先驗概率與後驗概率
本人習慣用結構化的圖例記憶知識，這裏記錄下先驗概率與後驗概率： 點贊 收藏 分享 文章舉報 陳 超 發佈了82 篇原創文章 · 獲贊 214 · 訪問量 52萬+ 私信
2020-02-21 13:36:55