supervisor部署celery實踐

原因想用celery執行一些爬蟲的後續操作,不佔用爬蟲爬取的時間.嘗試了不同的方法感覺supervisor最靠譜,這也是celery官方推薦的做法.

做法:

1 安裝 supervisor

sudo apt-get install supervisor

pip install supervisor

2 進入項目文件夾,創建 conf 文件

cd project
echo_supervisord_conf> supervisord.conf

結果如下所示

3 編輯conf文件

使用項目的路徑:

4 執行命令

supervisord

查看日誌輸出

MQ queue 示意圖

完結~