scrapy實現定時爬取

我們在項目根目錄建一個main.py文件

import time
from scrapy import cmdline


if __name__ == '__main__':
    
    while Ture:
         
        print("爬蟲啓動................")
        
        cmdline.execute("scrapy crawl spider".split()) 

        print("爬蟲結束................")


        time.sleep(2*60)                # 每兩分鐘執行一次