原创 python_爬蟲爬取前瞻產業研究院的全國產業園區polygon範圍面狀圖層shp
總體思路爲： 1、從網站上獲取每個園區的id 2、從每個園區的網頁上獲取地圖的iframe 3、保存加載地圖iframe的網頁，因爲裏面有polygon數據 4、從html網頁中使用正則表達式提取polygon，並將數據處理成ar
2020-06-13 16:51:19
15
原创 taro平臺打包方法和bug修復(持續更新)
一、bug修復 1、@tarojs/[email protected] requires a peer of @types/react@^16.4.6 but none is installed. You must install
2020-06-13 16:51:19
原创 sql_創建各種交通方式的工作日非工作日OD視圖
本文主要分爲以下幾部分： 1、創建每個人的公交車起點和終點表 2、創建每個人的地鐵起點和終點表 3、創建非工作日白天地鐵od平均值視圖 4、創建非工作日白天公交車od視圖 5、創建非工作日晚上地鐵od平均值 6、創建非公工作日晚上
2020-06-13 16:51:19
1
原创 python_pandas_將街道行政區級別的數據進行分組求和
# -*- coding: utf-8 import pandas as pd ''' population|gender|age|district_O|street_O|district_D|street_D 01|10|1|區
2020-06-13 16:51:19
1
原创 WebGIS_Javascript_在mapbox展示客流OD線狀圖
mapbox展示客流OD線狀圖的步驟如下： 1、首先引入mapbox 2、獲取數據 3、將數據轉爲mapbox能識別的geojson格式 4、調用mapbox的addSource和addLayer方法將線狀圖層添加上mapbox
2020-06-13 16:51:19
1
原创 python_爬蟲_百度地圖遷徙_城市遷入目的地_城市遷出目的地_省份遷入_省份遷出
python_爬蟲_百度地圖遷徙的總體思路： 1、獲取百度地圖的城市編號和城市名對應關係 2、獲取你想抓取的日期 3、使用request發送請求 4、將其寫入到json文件中 遺憾的是百度地圖只有每個城市遷入遷出佔比，沒有具體人數
2020-06-13 16:51:19
1
原创 python_將爬取的的百度地圖遷徙json數據寫成csv矩陣
爬取百度地圖遷徙數據的方法請參考這篇文章： python_爬蟲_百度地圖遷徙_遷入地來源_遷出目的地 將json數據處理成excel請參考這篇文章： python_將爬取的百度地圖遷徙json數據寫入到excel 原始數據格式:
2020-06-13 16:51:19
原创 python_爬蟲爬取高德地理編碼
import pandas as pd import requests import urllib.parse #調用接口示例 'https://restapi.amap.com/v3/geocode/geo?address=北
2020-06-13 16:51:19
原创 python_爬蟲爬取高德地圖公交線路_贈高德地圖key
python_爬取高德地圖某條公交線路_贈高德地圖key 原創不易，轉發請帶本文鏈接 使用高德地圖可以搜索單條公交線路，使用代碼可以一次性爬取高德地圖公交 贈送一個企業高德key，大部分高德的接口日訪問量30萬 88d2e276d
2020-06-13 16:51:19
原创 python_爬蟲爬取庫房無憂網的庫房數量
原創不易，轉發請帶本文鏈接 爬蟲爬取庫房無憂網每個城市的庫房數量 爬取前請到高德地圖找到自己城市的起始經緯度和終止經緯度 import os import requests from utils.read_write impor
2020-06-13 16:51:19
原创 python_爬蟲_百度地圖遷徙_遷入地來源_遷出目的地
百度地圖遷徙鏈接爲 ：https://qianxi.baidu.com/ 建議儘早爬取數據，以後可能會關閉 python爬蟲的代碼 import os import random import time from urllib i
2020-06-13 16:51:19
原创 python_將爬取的百度地圖遷徙json數據寫入到excel
爬取百度地圖遷徙數據的方法請參考這篇文章： python_爬蟲_百度地圖遷徙_遷入地來源_遷出目的地 import os import re from urllib import request import xlwt from
2020-06-13 16:51:19
1
原创 python_將客流od數據轉成csv矩陣形式
本文章數據來源請參考這篇文章： python_pandas_將街道行政區級別的數據進行分組求和 import pandas as pd from utils.read_write import readCsv, writeCSV
2020-06-13 16:51:19
原创 python_計算公交車出行OD
計算公交車出行OD的整體思路如下： 基於公交車出行軌跡數據、設備線路對照表和乘客刷卡數據表。 公交車軌跡原始數據：公交車車牌號、定位時間和經緯度等信息， 乘客的刷卡數據：卡號、刷卡時間和交易終端號等信息。 公交車乘客出行OD提取規
2020-06-13 16:51:19
19