下載 https://github.com/android 上的全部源代碼

從 https://android.googlesource.com/ 上弄源代碼下來真是不容易，不但得用 vpn，repo 還得半天。github 的速度就快多了，關鍵是不用 vpn，隨時可以下載。而且 github 還可以直接下載 zip 包，那速度可不是 repo 能比的。下面寫了個代碼批量下載 zip 包：

#coding:cp936
import re, requests

download_path = '.' # 壓縮包下載後的存放位置
tag = 'android-4.1.2_r2.1' # 分支或標籤的名稱，如果是主版本就寫 master

base_url = 'https://github.com/android'
archive_url = 'https://github.com/android/%s/archive/%s.zip'
pagination_re = '<a href="/android\?page=.*?">(.*?)</a>'
repo_re = '<a href="/android/.*?" itemprop="name codeRepository">(.*?)</a>'
page_count = 1
repo_items = []

session = requests.Session()
session.headers.update({
    'User-Agent': 'Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.9.2.3) Gecko/20100401 Firefox/3.6.3 (.NET CLR 3.5.30729)',
})

html = session.get(base_url).text
page_result = re.findall(pagination_re, html, re.S)
if page_result != []:
    page_count = int(page_result[-2])

repo_result = re.findall(repo_re, html, re.S)
if repo_result != []:
    repo_items += repo_result

repo_items = map(lambda x: x.strip(), repo_items)

if page_count > 1:
    current_page = 2
    while current_page <= page_count:
        html = session.get(base_url + "/?page=%d" % current_page).text
        repo_result = re.findall(repo_re, html, re.S)
        if repo_result != []:
            repo_items = repo_items + repo_result
        current_page += 1

運行完後，會生成一個 bat 文件，裏面是用 wget 來下載的，結果如下。運行 bat 等待下載完成就行了。

wget "https://github.com/android/platform_frameworks_base/archive/android-4.1.2_r2.1.zip" -c --output-document=".\platform_frameworks_base.zip" --no-check-certificate
wget "https://github.com/android/kernel_common/archive/android-4.1.2_r2.1.zip" -c --output-document=".\kernel_common.zip" --no-check-certificate