原创 Flask項目--魚書學習筆記(一)

Flask項目–魚書學習筆記(一) Flask安裝過程略。 判斷查詢參數是否爲isbn號 @app.route("/search/<q>/<page>") def search(q,page): """ 搜索書籍路

原创 用Python爬蟲實現自動簽到(二)—— requests方式

用Python爬蟲實現自動簽到(二)—— requests方式 上一篇博客詳細介紹了用selenium模擬瀏覽器行爲進行自動簽到的過程。具體實現過程請參照 用Python爬蟲實現自動簽到(一)—— selenium方式 使用sel

原创 用Python爬蟲實現自動簽到(一)—— selenium方式

用Python爬蟲實現自動簽到(一)—— selenium方式 tags: Python 爬蟲 自動簽到 selenium xpath 用爬蟲來實現自動簽到算是爬蟲裏一種比較簡單的應用,但不妨礙它很實用。總共會有兩篇博客分別用s

原创 SparkStreaming動態讀取配置文件

SparkStreaming動態讀取配置文件 標籤: SparkStreaming HDFS 配置文件 MySql 需求 要實現SparkStreaming在流處理過程中能動態的獲取到配置文件的改變 並且能在不重啓應用的情況下更新配置

原创 NetFlow學習總結

NetFlow學習總結 標籤: netflow 由於工作需要,對NetFlow做了一些學習和調研,並總結成文檔以供學習分享。 背景:隨着系統的升級與漏洞的修補,入侵主機進而進行破壞的病毒攻擊方式在攻擊中所佔比例逐漸減少,這些攻擊轉而改

原创 基於Spark和SparkSQL的NetFlow流量的初步分析——scala語言

基於Spark和SparkSQL的NetFlow流量的初步分析——scala語言 標籤: NetFlow Spark SparkSQL 本文主要是介紹如何使用Spark做一些簡單的NetFlow數據的處理,是基於 IntelliJ ID