2020
09-28
09-28
利用Python如何实时检测自身内存占用
前言最近在做文本统计,用Python实现,遇到了一个比较有意思的难题——如何保存统计结果。直接写入内存实在是放不下,十几个小时后内存耗尽,程序被迫关闭。如果直接写入数据库吧,每次写入又太慢了,本来就十几个小时了,这样下去就要往星期上数了,也不是个办法。解决方案最后,我想到了一个两者兼顾的方案——用内存做缓冲,达到一定量之后一次性将当前所有数据合并到硬盘里。但这样就有一个阈值,如何确定同步硬盘的时机,通...
继续阅读 >