原创 PAT 甲級 1108 Finding Average (20分)

1108 Finding Average (20分)   The basic task is simple: given N real numbers, you are supposed to calculate thei

原创 python數據可視化案例——力導向圖,網絡圖,關係圖(使用pyecharts,networkx,echarts,js)...

pyecharts無向關係圖,網絡圖,力導向圖,數據來源於2020美賽D題   import json import os from pyecharts import options as opts from pyecharts.c

原创 大數據Hadoop第三週——Hadoop集羣安裝

大數據第三週: 1.完善CentOS7最小安裝版 檢查是否能上網,進行系統更新,更新命令:sudo yum update ​   2.遠程使用服務器方法 沒有安裝GUI,是server系統常用的,但是本機操作並不是很方便,一般serv

原创 Python——因子分析(KMO檢驗和Bartlett's球形檢驗)

因子分析用Python做的一個典型例子 一、實驗目的 採用合適的數據分析方法對下面的題進行解答 二、實驗要求 採用因子分析方法,根據48位應聘者的15項指標得分,選出6名最優秀的應聘者。 三、代碼 import pandas as

原创 PAT 甲級 1104 Sum of Number Segments (20分)(有坑,int *int 可能會溢出)

1104 Sum of Number Segments (20分)   Given a sequence of positive numbers, a segment is defined to be a consecut

原创 大數據Hadoop第五週——Hadoop系統配置、啓動Hadoop集羣

大數據第5周 1.Hadoop系統配置 1.1 環境配置 需要配置兩個文件:hadoop-env.sh和yarn-env.sh,配置JAVA_HOME變量。 vi hadoop-env.sh,修改成瞭如下內容: vi

原创 大數據Hadoop第四周——免密鑰登錄設置、配置java和hadoop環境

大數據第4周   0.檢查聯網 每次打開虛擬機都無法聯網,都忘了打開服務這一步 ​   1.用戶名相同 要求三個虛擬機的用戶名相同,否者相互訪問時需要使用用戶名,這樣集羣會有問題。 如要新增用戶,先轉換爲root用戶su root,然後

原创 複雜統計方法R語言——簡單迴歸

簡單迴歸 數據來源:http://www.statsci.org/data/general/cofreewy.html   1.讀入數據 setwd("D:/數學建模/寒假美賽集訓/R統計") w=read.table("COfre

原创 大數據第十四周——Spark編程(RDD編程)

第十五週 Spark編程基礎 啓動集羣並檢查Spark 基於上週未完成部分,這周補上。直接輸入以下命令, ~/spark-2.4.5/bin/spark-submit --class org.apache.spark

原创 大數據Hadoop第十一週——四臺電腦的集羣配置

大數據第十一週 1.物理集羣的驗證 開啓本組所有電腦(4臺),拷貝虛擬機映像,打開。在開啓虛擬機之前,設置虛擬機內存是4G,處理器是4,網絡連接是橋接模式。 ​ 也可以在圖形界面配 ​ 把橋接網卡綁定到具體的物理網卡,不要使用自動

原创 大數據第十三週(上週補充)

大數據第十一週 1.物理集羣的驗證 開啓本組所有電腦(4臺),拷貝虛擬機映像,打開。在開啓虛擬機之前,設置虛擬機內存是4G,處理器是4,網絡連接是橋接模式。 ​ 也可以在圖形界面配 ​ 把橋接網卡綁定到具體的物理網卡,不要使用自動

原创 大數據Hadoop第二週——配置新的節點DataNode及ip地址

大數據第二週: 安裝CentOS7最小安裝版 ​ 磁盤空間不小於30G,將虛擬磁盤存儲爲單個文件。 ​ 自定義硬件界面上,注意要勾選“虛擬化Intel VT-x或AMD-V/RVI(V)”。 ​ 在此界面上,“SOFTWARE SELE

原创 大數據第十五週 Spark編程基礎實例——wordCount編程

第十五週 Spark編程基礎實例——wordCount編程 Shell下編寫wordCount 測試文件 創建一個本地文件word.txt,內含多行文本,每行文本由多個單詞構成,單詞之間用空格分隔,編寫spark程序

原创 ubuntu18.04和centos/.7.1908鏡像下載地址

阿里雲官方鏡像站:https://developer.aliyun.com/mirror/ ubuntu18.04:http://mirrors.aliyun.com/ubuntu-releases/18.04/ centos/.7.1

原创 PAT 2020五一線上測試賽 7-3 垃圾分類 (20分)

7-3 垃圾分類 (20分)   據香港《南華早報》2019年7月15日文章,上海嚴格的垃圾分類新規令不少居民抓狂。這催生出大量幫助找出正確分類答案的App和小程序。目前僅微信上就至少有280種與垃圾處理有關的App,在