用 sklearn 做的一个分类模型,数据量大约 30W 左右,在服务器上跑的,服务器 64G 内存。
1
cqcn1991 2017-08-03 22:49:33 +08:00 via iPhone
卧槽,如何在服务器上跑?求教
|
2
WildCat 2017-08-03 23:00:35 +08:00 via iPhone 1
@cqcn1991 为啥不能,做 DL 还在 AWS 的 GPU 实例上跑过。
jupyter notebook --ip 0.0.0.0 |
3
zjuhwc 2017-08-03 23:02:26 +08:00 via iPhone 1
oom 导致 kernel 挂了?起服务的 console 里一般能找到日志的,看看
|
4
swordspoet OP @cqcn1991 这个是我同事配置的,他是按照这个来做的,应该不太复杂 http://www.linuxdiyf.com/linux/26051.html
|
5
swordspoet OP @zjuhwc 对,我朋友也是要我去调用日志看得,但今天应该是看不了了。我咋感觉在 jupyter 上跑代码不太靠谱呢,是不是脚本跑的时候内存会自动优化?另外 oom 是啥,求解?
|
6
cqcn1991 2017-08-03 23:24:52 +08:00
|
7
Hzzone 2017-08-04 15:11:11 +08:00
可能是后台运算量太大死了,[*]表明 notebook 正在后台运行,我以前也经常遇到这个问题,后来不记得怎么解决了...
我还是觉得可以直接写成 py 运行。 看一下这个,直接 Google 错误信息更靠谱。 https://github.com/ipython/ipython/issues/9973 |
8
zjuhwc 2017-08-04 21:07:28 +08:00 via iPhone
@swordspoet oom 是内存溢出,出现这个情况进程会被杀掉
|