原创 python網絡爬蟲實戰-Scrapy,深入理解scrapy框架，解決數據抓取過程
一 前言二 網絡爬蟲簡介1 requests安裝2 簡單實例審查元素簡單實例三 爬蟲實戰1實戰背景2實戰升級3編寫代碼1實戰背景2實戰進階3整合代碼1 實戰背景2 小試牛刀3Beautiful Soup3整合代碼小說下載優美壁紙下載愛奇藝V
2019-05-13 12:56:50
原创 大數據數據分析-數據分析報告製作祕籍
1、首先你需要根據活動目標確定你的目標達成率，完成百分比，提升百分比。這是這次活動取得的成果，在一開始就寫。如：本次活動 uv 24w（20w，↑ 20%），uv價值 3.6（3，↑ 20%）2、如果是發週報、月報之類的數據，接下來就應該是
2019-05-13 12:56:28
原创 大數據數據倉庫-基於大數據體系構建數據倉庫Hive，Flume，Kafka，Azkaban
背景接着上個文章數據倉庫簡述，想寫一篇數據倉庫常用模型的文章，但是自己對數據倉庫模型的理解程度和建設架構並沒有下面這個技術專家理解的深刻，並且自己去組織語言，可能會有不準確的地方，怕影響大家對數據倉庫建模的理解，數據倉庫屬於一個工程學科，在
2019-05-13 12:56:28
原创 30天搞定大數據爬蟲項目，數據爬蟲、全文檢索、數據可視化、爬蟲項目監控
好，開始今天的文章。今天主要是來說一下怎麼可視化來監控你的爬蟲的狀態。相信大家在跑爬蟲的過程中，也會好奇自己養的爬蟲一分鐘可以爬多少頁面，多大的數據量，當然查詢的方式多種多樣。今天我來講一種可視化的方法。關於爬蟲數據在mongodb裏的版本
2019-05-13 12:56:28
原创 大數據數據倉庫-微軟BI SSIS ETL 控件與案例
一、Data倉庫的架構 Data倉庫(Data Warehouse DW)是爲了便於多維分析和多角度展現而將Data按特定的模式進行存儲所建立起來的關係型Datcbase，它的Data基於OLTP源Systam。Data倉庫中的Data是
2019-05-13 12:56:27
1
原创 大數據數據倉庫-獨一無二的數據倉庫建模指
簡介： 本文的主要內容不是介紹現有的比較流行的主要行業的一些數據模型，而是將筆者在數據倉庫建設項目中的一些經驗，在這裏分享給大家。希望幫助大家在數據倉庫項目建設中總結出一套能夠合乎目前業界規範的，滿足大部分行業數據倉庫建設標準的一種方法。所
2019-05-13 12:56:27
1
原创 2019年新技術集錦-P2P金融項目，電商，緩存，性能調優，設計模式，數據結構算法視頻教程
2019年新技術集錦-P2P金融項目，電商，緩存，性能調優，設計模式，數據結構算法視頻教程39套Java架構師，高併發，高性能，高可用，分佈式，集羣，電商，緩存，微服務，微信支付寶支付，公衆號開發，java8新特性，P2P金融項目，程序設計
2019-05-10 12:55:50
4
原创 大牛帶你進階架構師，系統架構，高端JAVA技術提升視頻教程
大牛帶你進階架構師，系統架構，高端JAVA技術提升視頻教程15套Java架構師，集羣，高可用，高可擴展，高性能，高併發，性能優化，設計模式，數據結構，虛擬機，微服務架構，日誌分析，工作流，Jvm，Dubbo ， Redis，ActiveM
2019-05-10 12:55:50
6
原创 一位資深架構師大牛給予Java技術提升的學習路線建議視頻教程網盤
15套Java架構師，集羣，高可用，高可擴展，高性能，高併發，性能優化，設計模式，數據結構，虛擬機，微服務架構，日誌分析，工作流，Jvm，Dubbo ， Redis，ActiveMQ，Nginx，Mycat，Netty，Jvm，Mecac
2019-05-10 12:55:50
原创 Java大神帶你做年薪過50萬的架構師視頻教程
Java大神帶你做年薪過50萬的架構師視頻教程15套Java架構師，集羣，高可用，高可擴展，高性能，高併發，性能優化，設計模式，數據結構，虛擬機，微服務架構，日誌分析，工作流，Jvm，Dubbo ， Redis，ActiveMQ，Ngin
2019-05-10 12:55:50
3
原创 Java架構師-全棧-爲微服務高可用 高併發 高性能 微服務視頻教程
Java架構師-全棧-爲微服務高可用 高併發 高性能 微服務視頻教程15套Java架構師，集羣，高可用，高可擴展，高性能，高併發，性能優化，設計模式，數據結構，虛擬機，微服務架構，日誌分析，工作流，Jvm，Dubbo ， Redis，Ac
2019-05-10 12:55:50
6