原创 數據分析與挖掘筆記(十三)------挖掘建模之分類預測模型特點

常見的模型評價和在python中的實現 模型 模型特點 支持庫 邏輯迴歸 比較基礎的線性分析模型,很多時候是簡單有效的選擇 sklearn.linear_model SVM 強大的模型,可以用來回歸、預測、分類等

原创 mysql插值出現 1366, "Incorrect string value 錯誤

錯誤截圖: 原因分析: mysql中的utf8編碼最多會用3個字節存儲一個字符,如果一個字符的utf8 編碼佔用4個字節(最常見的就是ios中的emoji表情字符),那麼在寫入數據庫時就會報錯。 解決方法: 在mysql的安裝目錄下找到

原创 數據分析與挖掘(十五)------挖掘建模之K-Means聚類算法

K-Means算法是經典的基於距離的非層次聚類算法,在最小化誤差函數的基礎上將數據劃分爲預定的類數K,採用距離作爲相似性的評價指標,即認爲兩個對象的距離越近,其相似度就越大。 1.算法過程     (1)從N個樣本數據中隨機選取K個對象作

原创 數據分析與挖掘(十四)------挖掘建模之聚類分析

聚類分析是在沒有給定劃分類別的情況下,根據數據相似度進行樣本分組的一種方法。與分類模型需要使用有類標記樣本構成的訓練數據不同,聚類模型可以建立在無類標記的數據上,是一種非監督的學習算法。聚類的輸入是一組未被標記的樣本,聚類根據數據自身的距

原创 數據分析與挖掘筆記(十二)------挖掘建模之分類與預測算法評價

分類與預測模型對訓練集進行預測而得出的準確率並不能很好地反映預測模型未來的性能,爲了有效判斷一個預測模型的性能表現,需要一組沒有參與預測模型建立的數據集,並在該數據集上評價預測模型的準確率,這組獨立的數據集叫做測試集。模型預測效果評價,通

原创 數據分析與挖掘(十六)------挖掘建模之聚類分析算法評價及主要聚類分析算法

一、聚類分析算法評價   聚類分析僅根據樣本數據本身將樣本分組。其目標是實現組內的對象相互之間是相似的(相關的),而不同組中的對象是不同的(不相關的)。組內的相似性越大,組間差別越大,聚類效果就越好。   (1)purity評價法 (2

原创 數據分析與挖掘筆記(十一)------ 挖掘建模之人工神經網絡

人工神經網絡是模擬生物神經網絡進行信息處理的一種數學模型。它以對大腦的生理研究成果爲基礎,其目的在於模擬大腦的某些機理與機制,實現一些特點的功能。   人工 神經元是人工神經網絡操作的基本信息處理單位。人工神經元的模型如圖5-6所示,它是

原创 數據分析與挖掘(十八)------挖掘建模之時序模式

一、引言 就餐飲企業而言,經常會碰到如下問題: 由於餐飲行業是生產和銷售同時進行,因此銷售預測對於餐飲企業十分必要。如何基於菜品歷史銷售數據,做好餐飲銷售預測,以便減少菜品脫銷現象和避免因備料不足而造成的生產延誤,從而減少菜品生產等待時間

原创 數據分析與挖掘(十七)------挖掘建模之關聯規則

關聯規則分析也稱爲購物籃分析,最早是爲了發現超市銷售數據庫中不同的商品之間的關聯關係。例如,一個超市的經理想要更多的瞭解顧客的購物習慣,比如“哪組商品可能會在一次購物中同時購買?”或者“某顧客購買了個人電腦,那該顧客三個月後購買數碼相機的

原创 數據分析與挖掘(十九)------挖掘建模之離羣點檢測

一、引言 就餐飲企業而言,經常會碰到如下問題。 1)如何根據客戶的消費記錄檢測是否爲異常刷卡消費? 2)如何檢測是否有異常訂單? 這類異常問題可以通過離羣點檢測來解決。 離羣點檢測的任務是發現與大部分其他對象顯著不同的對象。大部分數據挖掘

原创 MySQL創建新用戶、遠程訪問權限、數據庫授權

新用戶創建並允許遠程訪問: # %表示可以任何地址都可以連接,如果要指定ip地址連接,將%改爲指定ip地址即可。 CREATE USER 'test'@'%' IDENTIFIED BY 'password'; # 授予用戶數據庫權

原创 MySQL實現分列

實例: 把下圖的organization列中信息按照“_”分未兩列 # 首先在原表的基礎上添加新的一列,用來存放分列後的數據 alter table px_經銷商信息 add column organization_A varchar

原创 MySQL解壓版安裝問題:cant create directory ’xxxx’

在安裝MySQL解壓版過程中遇到如下問題: mysqld: Can't create directory ’xxxx’ (ErrorCode 2 - No such file or directory) 嘗試了各種網上的方法均無效果,最後

原创 MySQL登錄報錯:ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using password: YES)

文章轉載自:https://blog.csdn.net/hello_world_qwp/article/details/80346904  MySQL登錄失敗,錯誤信息如下: 解決辦法: 1.首先需要關閉MySQL服務,輸入命令: m

原创 python合併 excle表格至MySQL

需求背景:現在有九百多個excle表格,每個表格的格式都相同,需要把這些表格的內容都合併到一塊,同時將文件名也增加到合併後的表格中,座位每一個excel的標識之一。 部分文件截圖: 實現代碼; import xlrd, xlwt