文章詳情頁
python - 如何解決程序運行太久之后被操作系統暫停的情況？
瀏覽：298日期：2022-06-29 14:48:35
問題描述
我有幾個python爬蟲程序，需要持續不間斷運行，但是每次都是運行了兩天之后變得無響應，每次都是阻塞在time.sleep(60)的地方，但是進程又沒有死掉，在控制臺輸入Ctrl C都不能退出程序，只能在任務管理器里強制退出才行。
請問這是由什么原因導致的？以及如何解決這個問題？
先謝謝各位前輩了！
問題解答
回答1：問題分析建議:
linux: 可以嘗試通過strace命令追蹤進程狀態, 根據輸出的內容做分析,或者通過proc對應目錄的文件對進程的各項指標做分析! Ctrl-C無效,懷疑進程進入不可中斷的睡眠,具體還得看實際獲取的數據才有可能知道
windows: 通過任務管理器找到對應的進程, 右鍵->創建轉儲文件, 分析該轉儲文件看能否找出原因.
爬蟲程序: 自身對爬取的進度,做詳細的日志, 不管是鏈接,還是遇到的異常,最好都記錄下來,以便得知具體停止的時間, 和停止時,爬取的進度, 下次可以先針對這個進度再去深入分析.
回答2：linux系統的話試試用crontab去做定時任務windows用任務計劃
相關文章：
1. docker-compose中volumes的問題2. angular.js - angular內容過長展開收起效果3. golang - 用IDE看docker源碼時的小問題4. dockerfile - [docker build image失敗- npm install]5. mysql - 記錄開始時間和結束時間，表字段類型用timestamp還是datetime？6. MySQL 什么需求下（情況下）才使用事務？7. mysql函數unix_timestamp如何處理1970.1.1以前的數據?8. 表單提交驗證，沒反應，求老師指點9. 刷新驗證碼方法10. Mac下mysql在控制面板中stop按鈕點了沒反應
排行榜
網公網安備