原创 簡單的使用fastapi從數據庫取數據

model裏使用pandas查庫,因爲fastapi接受列表和字典類型,使用pandas的dataframe數據類型可直接轉爲字典進行返回。 import pymysql import pandas as pd class get

原创 使用sqlalchemy建表並從txt文件讀取入庫

使用sqlalchemy建表 首先數據庫要存在,我使用的是mysql數據庫。 from sqlalchemy import Column, String, create_engine, Integer from sqlalchem

原创 scrapyd的簡單使用

scrapyd scrapy是一個服務,可以將爬蟲部署在服務器端運行。並通過HTTP JSON的方式控制爬蟲,在web頁面上監控爬蟲。 安裝 服務器端安裝scrapyd pip install scrapyd 安裝成功後,輸入s

原创 使用requests和tqdm實現簡單的下載視頻並顯示進度條

使用requests下載視頻的同時顯示進度條,可以使用tqdm庫,關於tqdm庫的教程搜索就有很多。 這個簡單的demo直接上代碼 import os import requests from tqdm import tqdm