原创 基於Django開發的學生信息管理系統

一、 功能 實現對學生對個人信息的增刪查改 實現後臺對所有學生信息的操作 二、開發工具       Windows + Pycharm + Mysql + Django 三、git地址    https://github.com/Gscs

原创 Django之Form表單

        在Django中有一個驗證神器,那就是Form表單,它會自動生成你所需要的表單內容,並自動爲你驗證是否正確,並可以返回錯誤的詳細信息(前提是你寫的詳細)。 Django中的Form使用時一般有兩種功能:          

原创 Django admin後臺管理的配置

最近整理了一些關於Django admin後臺管理的資料 model: from django.db import models from django.utils import timezone from django.contrib

原创 hadoop上搭建spark

一、spark安裝包 鏈接:https://pan.baidu.com/s/1RyJ2I4wUlVxgaGJXtIsBNw  提取碼:rrzz  複製這段內容後打開百度網盤手機App,操作更方便哦  二、spark配置 1.  上傳

原创 window下搭建虛擬機和hadoop集羣

一、windows下搭建虛擬機    1. 創建虛擬機01                            2. 創建虛擬機02                             3.  創建虛擬機03            

原创 PySpark讀取並清洗mongoDB數據

windows下pyspark讀取mongo中的數據並清洗重複數據 1. mongo中樣例數據 // 1 { "_id": ObjectId("5e9aebe49e8fb72b646766ec"), "key": "ST

原创 PySpark讀取並清洗json文件數據

pyspark讀取json文件清洗並寫入json文件 from pyspark.sql import SparkSession def getSqlAndSpark(): """ 獲取SQL和Spark的對象, SQ

原创 Linux環境下配置python3環境

yum -y install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gdbm-devel db4-

原创 Python config 配置 之 configparser 使用方法

1. 爲什麼寫這篇文章      我使用配置的以下幾種方式:            1.  類中的 __init__ 初始化方法中            2.  單獨新建一個py文件來存放config配置            3.  使

原创 PySpark RDD 之 takeSample

1. pyspark 版本        2.3.0版本   2. 官網 takeSample(withReplacement, num, seed=None)[source]¶ Return a fixed-size sampled s

原创 Linux學習筆記

學習Linux過程中記錄的命令,對工作非常有幫助 Linux個別知識點:           1. 隱藏文件:         隱藏文件的設計初衷是告訴用戶這是個系統文件,除非確定要動他,不然不要隨便使用他     2. 軟鏈接與硬鏈接

原创 python進度條

最近寫的代碼中寫了很多函數,都是按步驟調用的,想看代碼執行到第幾個函數了,但又不想在每個函數中打印來表示執行到哪了,這時候就想用進度條來顯示了,看網上沒有我這種思路來實現的,自己來寫個 import time import tqdm

原创 老闆啥都懂,天天來套路我

                                                                           今天                                          

原创 Studio 3T破解

啓動Studio 3T發現30天試用已過期 解決辦法: 1. 在任意目錄下新建一個.bat文件,名字任意取,文件內容如下 @echo off ECHO 重置Studio 3T的使用日期...... FOR /f "tokens=1,2,

原创 張一鳴:10年面試2000人,我發現混的好的人,全都有同一個特質

張一鳴演講整理: 爲何畢業多年後 原本水平差不多的同學都拉開了差距? 大家好!各位都非常年輕,我今天來的時候挺有壓力。因爲我畢業快11年了,看到你們,真是覺得“長江後浪推前浪”。 我去年參加了武漢的校招,感覺新一代年輕人的素質確實都非常