文章詳情頁
我要在命令行同時不間斷地運行八九個python爬蟲程序（爬不同的網站）？
瀏覽：182日期：2022-08-21 18:56:02
問題描述
但是過一段時間總有一兩個程序會無響應，好像是被掛起了，CPU占用率并不高，不到10％，內存占用也不算多，60％左右，爬蟲程序是去批量下載文件，平均每個幾兆到十幾兆。我設置了這幾個程序的優先級高于普通標準，但是還是會出現無響應的狀況。版本 python 2.7
求問:這個問題算不算進程被掛起？以及應該如何解決這個問題？
謝謝！
問題解答
回答1：這種問題得自己調，多打log
回答2：Python 有 GIL
相關文章：
1. docker - 各位電腦上有多少個容器啊？容器一多，自己都搞混了，咋辦呢？2. 關docker hub上有些鏡像的tag被標記““This image has vulnerabilities””3. mac里的docker如何命令行開啟呢？4. 關于docker下的nginx壓力測試5. Docker for Mac 創建的dnsmasq容器連不上/不工作的問題6. nignx - docker內nginx 80端口被占用7. docker容器呢SSH為什么連不通呢？8. 如何解決Centos下Docker服務啟動無響應，且輸入docker命令無響應？9. docker start -a dockername 老是卡住，什么情況？10. dockerfile - 我用docker build的時候出現下邊問題 麻煩幫我看一下
排行榜
網公網安備