原创 Learning Spark 學習筆記 第三章 RDDs編程

概述： RDD（resilient distributed dataset，彈性分佈式數據集），是一個抽象概念，是可分佈式存儲和處理的數據的集合。spark中可進行RDD的創建；轉化已存在的RDD爲一個新的RDD；在RDD上進行分佈式處

2020-07-02 14:36:50 1

原创 使用DialogFragment託管dialog

普通的 AlertDialog 在橫豎屏切換時會被銷燬，如果dialog上面有數據，也將丟失。解決方案是使用DialogFragment（http://developer.android.com/reference/android

2020-02-20 21:25:13

原创 Android EventBus實戰

轉載自：http://blog.csdn.net/lmj623565791/article/details/40794879 1、概述 最近大家面試說經常被問到EventBus，github上果斷down了一份，地址：https

2020-02-20 21:25:13 1

原创 Learning Spark 學習筆記 第二章 Downloading Spark and Getting Started

spark方面的書太少，而且中文版的幾乎沒有，且僅有的中文版都翻譯的一塌糊塗，所以我這個英文很爛的人只能一邊開着有道一邊硬着頭皮啃英文版的書，先入手一本《Learning Spark》，只是爲了記錄自己學習過程，有用的東西記下來方便以後

2020-02-20 21:25:13

原创 redis極簡記錄---連接

一 遠程連接redis-cli -h 127.0.0.1 -p 6379 -a 123456-h：redis server的ip-p：redis server的端口-a：密碼如果沒有加密碼驗證，則去掉-a。如果有密碼，redis-cli

2018-08-24 04:29:16 1

原创 redis極簡記錄---主從同步

一 相關配置slaveof <masterip> <masterport>:master相關信息masterauth xxxx：master密碼slave-serve-stale-data yes：slave失去master連接或正在數據

2018-08-24 04:29:16

原创 Spark 2.3.0 Spark SQL, Datasets, and DataFrames 學習筆記

一 概述spark sql是結構化數據處理模塊，可以通過SQL語句和Dataset API進行結構化數據處理。1.1 SQLspark sql一個用途就是sql查詢，也可以讀取已經存在的hive倉庫的數據。程序中運行sql語句，將會返回D

2018-08-24 04:29:15

原创 spark官方文檔之——Spark programming guide spark編程指南

（相關代碼爲scala版本，其他java和python版自行查閱） 概述 每個spark應用由一個driver program組成，driver program運行用戶main函數並在集羣上執行多種並行操作。spark主要的抽象概念是彈性

2018-08-24 04:29:15 2

原创 spark官方文檔之——Spark Streaming Programming Guid spark streaming編程指南

概述 spark streaming是core spark api的擴展，能夠進行可伸縮的、高通量、容錯的實時流處理。數據可來源於kafka，flume，twitter，zeromq，kinesis或tcp sockets，基於這些數據

2018-08-24 04:29:15

原创 關於hadoop無法啓動的問題

在hadoop上搭spark，首先搭了scala環境，然後spark下載配置。弄好之後，想啓動例子試一把。 首先啓動hadoop···接着就沒有然後了·hadoop一直啓不來，shell打印的也沒有不正常的： [vdc@comput

2018-08-24 04:29:15

原创 Spark 2.3.0 Spark Streaming Programming Guide 學習筆記

一 概述spark是近實時的流處理框架，支持的數據源有kafka、flume、kinesis、tcp sockets、文件系統等。流式讀取數據後，可以用類似map、reduce、join和window等高層函數進行處理。最終，處理後的數據

2018-08-24 04:29:15 3

原创 redis極簡記錄---配置文件學習

一 安裝notepad，遠程連接服務器修改文件由於配置文件在linux環境下，所以不方便查看修改，這裏使用notepad遠程打開配置文件：安裝notepad，然後插件裏找NppFTP插件安裝，然後show NppFTP window，最後

2018-08-24 04:29:15

原创 Spring Cloud config ------ 動態更新及spring cloud bus優化

在前面文章基礎上進行，請參考：Spring Cloud config ------ 基礎使用Spring Cloud config ------ 認證和安全一 動態更新spring cloud config配置中心客戶端，會去服務端進行請

2018-08-24 04:29:15

原创 redis極簡記錄---單機版安裝、註冊服務、密碼驗證

一 下載安裝http://www.redis.cn/download.html 中文網下載redis-4.0.9，上傳至linux/usr/local，解壓。cd /usr/local/redis-4.0.9make PREFIX=/us

2018-08-24 04:29:15

原创 spring boot學習 - git及github使用

    這裏只記錄簡單的項目中的使用，當做自己的學習筆記。    一 git安裝       Windows環境下https://gitforwindows.org/下載最新版本，download。一路next後即可。    二 gith

2018-08-24 04:29:15 12