Python中文
首页
教程
问答
标签
搜索
登录
注册
当多线程python进程运行时,OS开始终止进程
回答此问题可获得
20
贡献值,回答如果被采纳可获得
50
分。
<p>这是最奇怪的事!在</p> <p>我有一个用Python编写的多线程客户机应用程序。我使用线程来同时下载和处理页面。我将使用cURL多句柄,除了瓶颈肯定是这个应用程序中的处理器(而不是带宽),因此使用线程池更有效。在</p> <p>我有一个64b i7摇摆16GB内存。比菲。我启动80个线程,同时听潘多拉和拖拉Stackoverflow和BAM!父进程有时以消息结尾</p> <p><code>Killed</code></p> <p>其他时候,一个单独的页面(在Chrome中是它自己的进程)会死掉。有时整个浏览器崩溃。在</p> <p>如果你想看一点代码,这里是它的要点:</p> <p>下面是父进程:</p> <pre><code>def start( ): while True: for url in to_download: queue.put( ( url, uri_id ) ) to_download = [ ] if queue.qsize( ) < BATCH_SIZE: to_download = get_more_urls( BATCH_SIZE ) if threading.activeCount( ) < NUM_THREADS: for thread in threads: if not thread.isAlive( ): print "Respawning..." thread.join( ) threads.remove( thread ) t = ClientThread( queue ) t.start( ) threads.<a href="https://www.cnpython.com/list/append" class="inner-link">append</a>( t ) time.sleep( 0.5 ) </code></pre> <p>下面是ClientThread的要点:</p> ^{pr2}$ <p>编辑:哦,对了……忘了问这个问题……应该很明显:为什么我的进程会被杀死?它是否发生在操作系统级别?内核级别?这是因为对我可以拥有的打开的TCP连接数量的限制吗?这是对我一次可以运行的线程数的限制吗?<code>cat /proc/sys/kernel/threads-max</code>的输出是<code>257841</code>。所以…我不认为是。。。。在</p> <p>我想我找到了…好吧…我的硬盘上根本没有交换空间。现在有没有办法创建一些交换空间?我在运行Fedora16。有交换…然后我启用了我所有的RAM,它神奇地消失了。拖尾<code>/var/log/messages</code>我发现了这个错误:</p> <pre><code>Mar 26 19:54:03 gazelle kernel: [700140.851877] [15961] 500 15961 12455 7292 1 0 0 postgres Mar 26 19:54:03 gazelle kernel: [700140.851880] Out of memory: Kill process 15258 (chrome) score 5 or sacrifice child Mar 26 19:54:03 gazelle kernel: [700140.851883] Killed process 15258 (chrome) total-vm:214744kB, anon-rss:70660kB, file-rss:18956kB Mar 26 19:54:05 gazelle dbus: [system] Activating service name='org.fedoraproject.Setroubleshootd' (using servicehelper) </code></pre>
0 条评论
分类:
Python问答
请先
登录
后评论
默认排序
时间排序
1 个回答
匿名
1天前
擅长:python、mysql、java
<p>你在做一个</p> <pre><code>raise SystemExit </code></pre> <p>它实际上退出了Python解释器,而不是运行在其中的线程。在</p>
请先
登录
后评论
针对此问题:
更多的回答
关注
89
关注
收藏
1
收藏,
216
浏览
网友 提问于 2天前
相关Python问题
尽管Python中的所有内容都是引用,为什么Python导师在没有指针的列表中绘制字符串和整数?
2 回答
尽管python中的表达式为false,但循环仍在运行
10 回答
尽管python代码正确,但从nifi ExecuteScript处理器获取语法错误
3 回答
尽管Python在Neovim中工作得很好,但插件不能识别Neovim中的Python主机
8 回答
尽管python字典包含了大量的条目,但它并没有增长
6 回答
尽管python说模块存在,为什么我会得到这个消息?
8 回答
尽管setuptools和控制盘是最新的,但无法识别singleversionexternallymanaged
4 回答
尽管stdout和stderr重定向,但未捕获错误消息
10 回答
尽管Tensorboard的事件太大,但Tensorboard的步骤太少了
5 回答
尽管tkinter上的变量已更改,但显示未更改
1 回答
尽管try/except使用Python进行单元测试时出现断言错误
7 回答
尽管URL是sam,但仍会抛出“达到最大重定向”
10 回答
尽管url有效,Pandas仍读取url的\u csv错误
10 回答
尽管while中存在时间延迟,但LINUX线程的CPU利用率为100%(1)
3 回答
尽管x0在范围内,Scipy优化仍会引发ValueError
10 回答
尽管xpath正确,但使用selenium单击链接仍不起作用
10 回答
尽管下载了ffmpeg并设置了路径变量python,但没有后端错误
9 回答
尽管下载了i,但找不到型号“fr”
9 回答
尽管下载了plotnine包,但未获取名为“plotnine”的模块时出错
9 回答
尽管为所有行指定了权重,网格(0)仍不起作用
9 回答