原创 spark 程序配置日誌級別 通過log4j

spark 如何配置日誌打印級別 Log4j.properties文件   1、spark自身的打印級別 首先明白如何設置spark本身的日誌級別 Edit your conf/log4j.properties file and chan

原创 Kafka Streams 一些問題總結 以及消費者一些問題彙總

  1、streams api 的疑惑 1、釋疑 kafka streams api和普通 consumer producer區別 https://stackoverflow.com/questions/44014975/kafka-co

原创 Spark DataFrame VS DataSet 如何創建DataFrame DataFrame 詳解

  一 概念預覽 1、對應關係 2、DataFrames and Datasets 3、Schemas 定義: 4、Structured Spark Types 1、DataFrame Vs DataSet 2、Columns 3、Row

原创 常見排序 算範 希爾排序

(1)插入排序的基本方法是:每步將一個待排序的元素,按其排序碼大小插入到前面已經排好序的一組元素的適當位置上去,直到元素全部插入爲止。 (2)可以選擇不同的方法在已經排好序的有序數據表中尋找插入位置,依據查找方法的不同,有多種插入

原创 數據結構 b樹 b+樹

轉載於:http://www.cnblogs.com/yangecnu/p/Introduce-B-Tree-and-B-Plus-Tree.html 淺談算法和數據結構: 十 平衡查找樹之B樹 前面講解了平衡查找樹中的2

原创 永久激活idea

1、去官網下載並安裝 idea地址:https://www.jetbrains.com/idea/download 文件有點大,耐心等待一會兒。 2、下載破解(crack) jar 包鏈接: https://pan.baidu.co

原创 樹的排序算法 前序 中序 後序

樹節點 保存結點值,左子樹,右子樹 public class TreeNode { private String value; private TreeNode left; private TreeNo

原创 雙向鏈表的插入刪除新增

鏈表節點 存放 結點值,前繼結點,後續結點 public class DoubleLink { public Long value; public DoubleLink pre; public DoubleLi

原创 微服務 消費 網關 幾種配置

目錄   1、微服務消費 1、微服務的消費模式   1、   服務直連模式  restTemplate.getForEntity(uri,String.class)  2、客戶端發現模式  3、服務端發現模式        2、常見微服務

原创 Mysql數據庫的優化

數據庫的優化 1、合理設計數據庫 3F式 2、合理設計數據庫索引 3、分庫分表 4、

原创 計算機網絡自頂向下 應用層

二、計算機網絡自頂向下  應用層  

原创 第一章 計算機網絡和因特網

1、計算機和網絡 一些名詞 DSL digital subscriber line 數字用戶線 ISP  Internet Service Provider 網絡服務提供者 DSLAM  Digital Subscriber Line A

原创 設計模式六大原則

單一職責原則 http://blog.csdn.net/lovelion/article/details/7536542 開閉原則 http://blog.csdn.net/lovelion/article/details/75375

原创 kafka詳細文章

KafkaKafka是最初由Linkedin公司開發,是一個分佈式、支持分區的(partition)、多副本的(replica),基於zookeeper協調的分佈式消息系統,它的最大的特性就是可以實時的處理大量數據以滿足各種需求場

原创 linux 基礎命令

目錄 UNIX與Linux發展史 Linux介紹 Linux應用領域 Linux特點 CentOS  社區版 VMware 學習方法 轉變思維習慣 不懼英文 勇往直前 動起來 練習 su 命令 文件處理命令 cd    ls    pwd