原创 svn遷移到git

gitblit 下載以及搭建參考:https://www.cnblogs.com/phpper/p/8041010.html (gitblit版本對應 java-8) 1、登錄gitblit,創建版本庫,例如:JszxProject

原创 linux下搭建svn

linux(centos7)下SVN服務器如何搭建 linux(centos)下SVN服務器如何搭建?說到SVN服務器,想必大家都知道,可以是在LINUX下如何搭建SVN服務器呢?那麼今天給大家分享一下linux(centos)搭建SVN

原创 scrapy遇到的坑關於 scrapy發起請求和requests發起請求返回的數據不一樣的問題 (發起的是request payload)

在抓取攜程的時候遇到一個問題  剛開始因爲公司是內網的原因scrapy無法訪問網站 已啓動就是超時重連後來決定用requests來對攜程進行採集 剛開始用requests進行採集的時候一點沒有問題採集回來的數據如下 返回的數據一切正常但

原创 windows下給docker設置代理

因爲公司網絡是內網需要添加代理才能聯網所以在網上搜了一下在這裏做個記錄 首先打開環境變量設置輸入: 變量名:HTTP_PROXY 變量值:公司的代理ip:prot 完成之後重啓docker就可以了  

原创 scrapy運行越來越慢的問題 大神們幫我看下是什麼原因,怎麼優化求各位大神給一些建議

# -*- coding: utf-8 -*- import scrapy import json from pymysql import * from Kuaibao_json.items import KuaibaoJsonItem

原创 天天快報遇到的一些問題

在抓取天天快報是抓到他的url地址爲http://kuaibao.qq.com/getRcmNewsList?refer=h5_aggr&req_num=15&qq=o1308186437&openid=&