文章詳情頁
我要在命令行同時不間斷地運(yùn)行八九個python爬蟲程序（爬不同的網(wǎng)站）？
瀏覽：172日期：2022-08-21 18:56:02
問題描述
但是過一段時間總有一兩個程序會無響應(yīng)，好像是被掛起了，CPU占用率并不高，不到10％，內(nèi)存占用也不算多，60％左右，爬蟲程序是去批量下載文件，平均每個幾兆到十幾兆。我設(shè)置了這幾個程序的優(yōu)先級高于普通標(biāo)準(zhǔn)，但是還是會出現(xiàn)無響應(yīng)的狀況。版本 python 2.7
求問:這個問題算不算進(jìn)程被掛起？以及應(yīng)該如何解決這個問題？
謝謝！
問題解答
回答1：這種問題得自己調(diào)，多打log
回答2：Python 有 GIL
上一條：flask - Python使用redis發(fā)布訂閱時，監(jiān)聽頻道時出現(xiàn)的問題？【一句話描述不清楚，請各位細(xì)看內(nèi)容】下一條：python - django queryset自定義排序問題
相關(guān)文章：
1. 關(guān)docker hub上有些鏡像的tag被標(biāo)記““This image has vulnerabilities””2. docker-compose中volumes的問題3. boot2docker無法啟動4. nignx - docker內(nèi)nginx 80端口被占用5. docker安裝后出現(xiàn)Cannot connect to the Docker daemon.6. dockerfile - 為什么docker容器啟動不了？7. docker容器呢SSH為什么連不通呢？8. node.js - antdesign怎么集合react-redux對input控件進(jìn)行初始化賦值9. java - SSH框架中寫分頁時service層中不能注入分頁類10. 關(guān)于docker下的nginx壓力測試
排行榜
熱門標(biāo)簽
網(wǎng)公網(wǎng)安備