原创 格式化字符串及print函數

文章目錄print()函數查看幫助文件格式化字符串%號格式化佔位符format格式化(1)位置映射(2)關鍵字映射(3)索引 print()函數查看幫助文件 >>> help(print) Help on built-in fun

原创 hdfs體系架構及讀寫流程

HDFS體系架構 HDFS是一個主/從(Master/Slave)體系架構,由於分佈式存儲的性質,集羣擁有兩 類節點NameNode 和DataNode。 NameNode(名字節點):系統中通常只有一個,中心服務器的角色,管理存

原创 作業8-12

python下劃線的作用 單下劃線 _ 作爲一個臨時或者無關緊要的變量 a, _, _, b = (1, 2, 3, 4) print(a, b) # 1 4 前導單下劃線 _test 命名約定,告知其他程序員該變量或者方法僅

原创 hbase理論總結

HBase HBase – Hadoop Database,是一個高可靠性、高性能、面向列、可伸縮的分佈式存儲系統,利用HBase 技術可在廉價 PC Server 上搭建起大規模結構化存儲集羣。 HBase簡介 HBase 是

原创 markdown使用及python基本信息

文章目錄markdown使用修改字體顏色代碼塊高亮列表字體刪除線斜體加粗斜體加粗分割線超鏈接列表數學公式流程圖python學習基本信息python創始人python應用領域編程語言分類python之禪單行註釋多行註釋python程

原创 SecondaryNameNode

思考:NameNode中的元數據是存儲在哪裏的? 首先,我們做個假設,如果存儲在NameNode節點的磁盤中,因爲經常需要進行隨機訪問,還有響應客戶請求,必然是效率過低。因此,元數據需要存放在內存中。但如果只存在內存中,一旦斷電,

原创 mapreduce

MapReduce計算框架 如果將 Hadoop 比做一頭大象,那麼MapReduce就是那頭大象的電腦。MapReduce是Hadoop核心編程模型。在Hadoop 中,數據處理核心就是 MapReduce程序設計模型。 Map

原创 hdfs特點

HDFS文件系統 1.HDFS特點 HDFS文件系統可存儲超大文件 每個磁盤都有默認的數據塊大小,這是磁盤在對數據進行讀和寫時要求的最小單位,文件系統是要構建於磁盤上的,文件系統也有塊的邏輯概念,通常使磁盤塊的整數倍。 HDF

原创 函數

文章目錄函數引子函數的定義函數調用函數文檔說明函數參數函數返回值函數參數種類位置參數默認值參數關鍵字參數不定參數函數引用函數屬性內嵌函數變量作用域作用域的產生作用域的類型全局變量和局部變量global遞歸匿名函數(lambda)高

原创 面向對象

文章目錄面向對象3種常見的編程方式面向過程面向對象面向對象編程面向對象技術簡介類的定義和使用數據封裝類屬性的補充總結:對象之間的交互類命名空間與對象、實例的空間函數的三大特性繼承多態封裝鴨子類型靜態方法和類方法靜態方法類方法pro

原创 字符串列表元組比較

文章目錄相同點拼接重複索引、切片計數最大最小值遍歷刪除有序可重複定位(.index())不同點字符串大小寫轉換刪搜索定位字符串條件判斷字符串分割變換列表增加列表反轉/排序 相同點 拼接 sr = '1' sr2 = '2' li

原创 集合

文章目錄集合(set())集合的創建空集合多元素的集合創建強轉集合的基本操作增刪改查遍歷集合的基本運算子集交集並集差集 集合(set()) 無序 不可重複 不可更改 內部的元素是可哈希的 集合本身是不可哈希的 用{}括起來

原创 python面試題

爲什麼學習Python 愛好 通過什麼途徑學習Python 首先看視頻自學,然後看書自學,最後報班學。 談談Python和其他語言的區別 Python屬於解釋型語言,當程序運行時,是一行一行的解釋並運行,調試程序簡單,

原创 OS模塊

文章目錄OS模塊1.系統操作2.目錄操作---增刪改查(direction)3.判斷文件4.拓展: OS模塊 OS模塊是Python標準庫中用於訪問操作系統功能的模塊。 使用OS模塊提供的接口,能夠實現跨平臺訪問。 最常見的操作:

原创 閉包與裝飾器

文章目錄閉包裝飾器裝飾器的幾種形式萬能裝飾器函數被多個裝飾器所裝飾類裝飾器總結 閉包 什麼是閉包 閉是封閉(函數中的函數),包是包含(該內部函數對外部函數作用域而非全局作用域變量的引用。) 閉包: 內部函數對外部函數作用域裏的變