原创 基於Django開發的學生信息管理系統
一、 功能 實現對學生對個人信息的增刪查改 實現後臺對所有學生信息的操作 二、開發工具 Windows + Pycharm + Mysql + Django 三、git地址 https://github.com/Gscs
原创 Django之Form表單
在Django中有一個驗證神器,那就是Form表單,它會自動生成你所需要的表單內容,並自動爲你驗證是否正確,並可以返回錯誤的詳細信息(前提是你寫的詳細)。 Django中的Form使用時一般有兩種功能:
原创 Django admin後臺管理的配置
最近整理了一些關於Django admin後臺管理的資料 model: from django.db import models from django.utils import timezone from django.contrib
原创 hadoop上搭建spark
一、spark安裝包 鏈接:https://pan.baidu.com/s/1RyJ2I4wUlVxgaGJXtIsBNw 提取碼:rrzz 複製這段內容後打開百度網盤手機App,操作更方便哦 二、spark配置 1. 上傳
原创 window下搭建虛擬機和hadoop集羣
一、windows下搭建虛擬機 1. 創建虛擬機01 2. 創建虛擬機02 3. 創建虛擬機03
原创 PySpark讀取並清洗mongoDB數據
windows下pyspark讀取mongo中的數據並清洗重複數據 1. mongo中樣例數據 // 1 { "_id": ObjectId("5e9aebe49e8fb72b646766ec"), "key": "ST
原创 PySpark讀取並清洗json文件數據
pyspark讀取json文件清洗並寫入json文件 from pyspark.sql import SparkSession def getSqlAndSpark(): """ 獲取SQL和Spark的對象, SQ
原创 Linux環境下配置python3環境
yum -y install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gdbm-devel db4-
原创 Python config 配置 之 configparser 使用方法
1. 爲什麼寫這篇文章 我使用配置的以下幾種方式: 1. 類中的 __init__ 初始化方法中 2. 單獨新建一個py文件來存放config配置 3. 使
原创 PySpark RDD 之 takeSample
1. pyspark 版本 2.3.0版本 2. 官網 takeSample(withReplacement, num, seed=None)[source]¶ Return a fixed-size sampled s
原创 Linux學習筆記
學習Linux過程中記錄的命令,對工作非常有幫助 Linux個別知識點: 1. 隱藏文件: 隱藏文件的設計初衷是告訴用戶這是個系統文件,除非確定要動他,不然不要隨便使用他 2. 軟鏈接與硬鏈接
原创 python進度條
最近寫的代碼中寫了很多函數,都是按步驟調用的,想看代碼執行到第幾個函數了,但又不想在每個函數中打印來表示執行到哪了,這時候就想用進度條來顯示了,看網上沒有我這種思路來實現的,自己來寫個 import time import tqdm
原创 Studio 3T破解
啓動Studio 3T發現30天試用已過期 解決辦法: 1. 在任意目錄下新建一個.bat文件,名字任意取,文件內容如下 @echo off ECHO 重置Studio 3T的使用日期...... FOR /f "tokens=1,2,
原创 張一鳴:10年面試2000人,我發現混的好的人,全都有同一個特質
張一鳴演講整理: 爲何畢業多年後 原本水平差不多的同學都拉開了差距? 大家好!各位都非常年輕,我今天來的時候挺有壓力。因爲我畢業快11年了,看到你們,真是覺得“長江後浪推前浪”。 我去年參加了武漢的校招,感覺新一代年輕人的素質確實都非常