文章詳情頁(yè)
我要在命令行同時(shí)不間斷地運(yùn)行八九個(gè)python爬蟲(chóng)程序（爬不同的網(wǎng)站）？
瀏覽：180日期：2022-08-21 18:56:02
問(wèn)題描述
但是過(guò)一段時(shí)間總有一兩個(gè)程序會(huì)無(wú)響應(yīng)，好像是被掛起了，CPU占用率并不高，不到10％，內(nèi)存占用也不算多，60％左右，爬蟲(chóng)程序是去批量下載文件，平均每個(gè)幾兆到十幾兆。我設(shè)置了這幾個(gè)程序的優(yōu)先級(jí)高于普通標(biāo)準(zhǔn)，但是還是會(huì)出現(xiàn)無(wú)響應(yīng)的狀況。版本 python 2.7
求問(wèn):這個(gè)問(wèn)題算不算進(jìn)程被掛起？以及應(yīng)該如何解決這個(gè)問(wèn)題？
謝謝！
問(wèn)題解答
回答1：這種問(wèn)題得自己調(diào)，多打log
回答2：Python 有 GIL
上一條：flask - Python使用redis發(fā)布訂閱時(shí)，監(jiān)聽(tīng)頻道時(shí)出現(xiàn)的問(wèn)題？【一句話描述不清楚，請(qǐng)各位細(xì)看內(nèi)容】下一條：python - django queryset自定義排序問(wèn)題
相關(guān)文章：
1. javascript - QQ第三方登錄的問(wèn)題2. 前端 - @media query 使用出現(xiàn)的問(wèn)題？3. docker 下面創(chuàng)建的IMAGE 他們的 ID 一樣？這個(gè)是怎么回事？？？？4. node.js - mongodb查找子對(duì)象的名稱為某個(gè)值的對(duì)象的方法5. 運(yùn)行python程序時(shí)出現(xiàn)“應(yīng)用程序發(fā)生異常”的內(nèi)存錯(cuò)誤？6. html5 - datatables 加載不出來(lái)數(shù)據(jù)。7. 測(cè)試自動(dòng)化html元素選擇器元素ID或DataAttribute [關(guān)閉]8. 利用IPMI遠(yuǎn)程安裝centos報(bào)錯(cuò)！9. javascript - 在 model里定義的 引用表模型時(shí)，model為undefined。10. spring-mvc - spring-session-redis HttpSessionListener失效
排行榜
熱門標(biāo)簽
網(wǎng)公網(wǎng)安備