原创 Datawhale第10期組隊學習活動:《動手學深度學習》課程筆記第一次打卡

Datawhale第10期組隊學習活動:《動手學深度學習》課程筆記第一次打卡 課程頁面:https://www.boyuai.com/elites/course/cZu18YmweLv10OeV 1 準備 1.1代碼環境搭建 py

原创 Datawhale-零基礎入門數據挖掘 - 二手車交易價格預測-- 賽題理解與數據分析(EDA)

這裏寫自定義目錄標題Datawhale-零基礎入門數據挖掘 - 二手車交易價格預測-- 賽題理解與數據分析(EDA)一、賽題理解二、數據探索性分析(EDA)2.1 介紹(摘自AI蝸牛車的Task2 數據分析)2.2 本次比賽EDA

原创 Datawhale-零基礎入門數據挖掘 - 二手車交易價格預測-- Task3-特徵工程

Datawhale-零基礎入門數據挖掘 - 二手車交易價格預測-- Task3-特徵工程 轉載自Datawhale-零基礎入門數據挖掘 - 二手車交易價格預測活動中分享的資料,如有侵權,聯繫刪除

原创 python爬蟲編程實踐4-大作業:用selenium爬取騰訊新聞的熱點精選

1、任務目標 (1)瞭解ajax加載 (2)通過chrome的開發者工具,監控網絡請求,並分析 (3)用selenium完成爬蟲 (4)任務: 用selenium爬取https://news.qq.com/ 的熱點精選 (5)目標

原创 python爬蟲編程實踐task3-ip代理、session和cookie、selenuim

1、IP代理 如何應對IP被封的問題: 1、修改請求頭,模擬瀏覽器(而不是代碼去直接訪問)去訪問 2、設置訪問時間間 3、採用代理IP並輪換 前兩個之前已經使用過,這裏貼一個建立IP代理池的代碼: from bs4 import

原创 python爬蟲編程實戰task2-bs4、xpath、re學習與相關實戰

1、bs4學習與實戰 我感覺bs4雖然可以解析和提取 HTML/XML 數據,但是匹配效率還是遠遠不如正則以及xpath的,一般不推薦使用,在這裏不作爲重點學習。 實戰之中國大學排名定向爬取: # 導入庫 import reque

原创 python爬蟲編程實踐task1

0 前期準備 知識目標: 瞭解http基礎,html基礎,嘗試使用request-get爬取豆瓣電影信息,瞭解api的使用 0-1 Window 下安裝配置ChromeDriver (1)點擊瀏覽器最右上角圖標的查看瀏覽器版本 依

原创 task5 模型融合

import pandas as pd import numpy as np import warnings import matplotlib import matplotlib.pyplot as plt import sea

原创 task4 建模與調參

import pandas as pd import numpy as np import warnings warnings.filterwarnings('ignore') def reduce_mem_usage(df):

原创 Python報錯TypeError:'str' object does not support item assignment.

Python報錯TypeError:‘str’ object does not support item assignment. Python二級刷題中遇到這樣一個題: 利用random隨機庫裏的函數,生成一個由四個大小寫字母組成

原创 pandas.read_csv() 報錯 OSError: Initializing from file failed

原文鏈接:https://blog.csdn.net/qq_35318838/article/details/80564938 Python版本:Python 3.6 pandas.re

原创 Linux下ubuntu系統中anaconda安裝以及xgboost安裝全過程(彙總)

1、anaconda安裝 1.1安裝包下載地址 https://repo.anaconda.com/archive/ 或https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/

原创 調用Graphviz常見問題處理

問題: 在Windows環境下anaconda調用graphviz時出現failed to execute [‘dot’, ‘-Tsvg’], make sure the Graphviz executables are on y

原创 linux終端終止當前進程

linux終端終止當前進程: caffe訓練測試出錯還終止不了… 快捷鍵: Ctrl+c 在命令行下起着終止當前執行程序的作用 Ctrl+d 相當於exit命令,退出當前shell Ctrl+s 掛起當前shell(保護作用很明顯

原创 一位數據挖掘成功人士給數據挖掘在讀研究生的建議(轉)

原文網址:http://www.cognoschina.net/club/viewthread.php?tid=1518 關於數據挖掘方面的研究,我原來也走過一些彎路。其實從數據挖掘的起源可以發現,它並不是一門嶄新的科學,而是綜合