可能是深度学习+拼多多的第一个受害者

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

这是一个创建于 2266 天前的主题，其中的信息可能已经有所发展或是发生改变。

现场： https://github.com/fastai/fastai/issues/751

今天装了 fastai，发现它的模型（哪怕再简单），都会导致系统死机和重启。

DEBUG 了半天，排查了所有的相关环境（ CUDA/cuDNN/Anaconda/PyTorch ），都没有发现问题
用 tensorflow / pytorch 单独跑简单的例子也不会有问题
但是一用 fastai，系统就会马上死机，百思不得其解。于是迫不得已发了个 issue

最终，发现这个问题竟然是因为公司的采购喜欢用拼多多造成的。

fastai

死机

TensorFlow

pytorch

68 条回复 • 2018-09-08 16:18:19 +08:00

jadec0der

2018-09-06 19:10:25 +08:00

Issue 应该这样写：Nasdaq: PDD

wevsty

2018-09-06 19:14:00 +08:00

原谅我笑出声。。。

顺便说一句，用垃圾电源小心硬盘挂，不知道这公司的数据有没有备份又价值多少。

ballshapesdsd

2018-09-06 19:15:57 +08:00

哈哈

alexapollo

2018-09-06 19:21:12 +08:00

@jadec0der 感谢指正！

bearqq

2018-09-06 19:25:13 +08:00

原来是电源辣鸡，哈哈哈
不买酷妈 /振华，好歹也买个航嘉 /长城啥的啊。。
只能说你幸运主板显卡硬盘什么的没坏

alexapollo

2018-09-06 19:26:28 +08:00

更新了细节，后面让公司统一换电源

Pythondr

2018-09-06 19:26:59 +08:00

所以说到底买了什么牌子的电源

againstodds

2018-09-06 19:36:21 +08:00

笑出了声。
兄弟，帮你发了一条 Hacker News，如果觉得不妥的话，告诉我我会去删掉。

https://news.ycombinator.com/item?id=17925471

SingeeKing

2018-09-06 19:38:08 +08:00

原谅我笑出声……

如果这种造成了严重后果，是否可以去起诉商家甚至拼多多。。

mrchi

2018-09-06 19:39:52 +08:00

强势围观

huhuhushan

2018-09-06 19:41:14 +08:00 via iPhone

真是笑死了

bxb100

2018-09-06 20:20:15 +08:00

笑死我了

TustMan

2018-09-06 20:26:47 +08:00

拼多多被黑的最高级的一次了

alexapollo

2018-09-06 20:47:47 +08:00

@againstodds 可以的，最好带上补充的 debug 细节，会清楚一点

airyland

2018-09-06 21:09:33 +08:00

看了 issue 我的关注点是有多个英文错误。。

nicevar

2018-09-06 21:18:11 +08:00

哈哈，这次不是保安夜晚起来踩电源线了

Applenice

2018-09-06 21:21:09 +08:00

哈哈哈哈嗝

AzadCypress

2018-09-06 21:22:25 +08:00 via Android

笑死了

hanru

2018-09-06 21:28:26 +08:00 via Android

码农思维，碰到问题找代码 bug。这种系统死机重启，大概率是硬件问题啊。

ex2vkf

2018-09-06 21:28:58 +08:00

如果在拼多多买显卡，是不是真的会买到煤气灶啊

May725

2018-09-06 21:32:26 +08:00

是如何发现原因的

ex2vkf

2018-09-06 21:35:25 +08:00

@May725 nvidia-smi 一看就知道了吧。。。。

iVeego

2018-09-06 21:36:08 +08:00 via Android

The power supply is buy from PinDuoDuo (Nasdaq: PDD), it says it has 550W, but it may be only support ~200W, I doubt it's a fake.

哈哈哈哈。

youngsterxyf

2018-09-06 21:36:33 +08:00

@alexapollo 知道的话可以发一下拼多多上这个电源的链接或者截图吗？

icylogic

2018-09-06 21:44:31 +08:00 via iPhone

的确有训练的时候发现供电不足的情况，现在好像是单卡的 750w，双卡的 1000w。而且公司怎么能允许从拼多多正式采购啊，拼多多有正规发票吗。。

loryyang

2018-09-06 21:50:57 +08:00

老哥英语水平需要再提升下呀。不过这个坑是有点奇葩

lunzima

2018-09-06 21:55:40 +08:00

工作站居然不用台达电源

zizifu

2018-09-06 22:00:28 +08:00 via Android

原谅我，我也笑了

sobigfish

2018-09-06 22:01:56 +08:00

所以没人关心采购到底中饱私囊了多少？😂

Lanceliel

2018-09-06 22:10:22 +08:00 via Android

@lunzima 在 V2 提电源居然也可以召唤出轮子妈……惊了。

Les1ie

2018-09-06 22:11:00 +08:00

Nasdaq: PDD $19.03 GMT-4 10:09 静静等今日价格变化

https://i.loli.net/2018/09/06/5b91350d0ae72.png

chanssl

2018-09-06 22:18:27 +08:00

你们公司采购这么为公司省钱啊

tanranran

2018-09-06 22:19:01 +08:00

After debugging for around 8 hours, I found the error:

TensorFlow and PyTorch's examples use only ~100W power.
Fastai's example (lesson1) use 80~300W power (not stable, changing fast).
While monitoring nvidia-smi, it seems like when power usage reach 200W, the system halted and reboot.
The power supply is buy from PinDuoDuo (Nasdaq: PDD), it says it has 550W, but it may be only support ~200W, I doubt it's a fake.
After changing this power supply, the issue solved.

笑死了

lzjqsdd

2018-09-06 22:50:47 +08:00 via Android

忍不住笑

livc

2018-09-06 23:17:02 +08:00

LZ 腾讯的？

wdlth

2018-09-06 23:27:52 +08:00

原来让你买 Tt 的钱都吃了回扣了？

kslr

2018-09-06 23:29:34 +08:00

又要上八卦新闻了

pandasoda

2018-09-06 23:37:16 +08:00

抱歉笑出声

wtks1

2018-09-06 23:39:38 +08:00 via Android

想起了公司采购吃回扣吃的太多，结果买回来 200 多台跑 linux 的电脑各种故障频出，一开始也是各种查询日志各种重做系统，最后才发现全是硬件垃圾的锅

green15

2018-09-06 23:58:14 +08:00 via iPhone

笑喷了，再检查检查，说不定还能找到槽点

azh7138m

2018-09-06 23:59:51 +08:00 via Android

issue 可以关掉了吧

epkT6QJ3RSaz6AnJ

2018-09-07 00:26:24 +08:00

围观

napoleonu

2018-09-07 01:49:55 +08:00

号称 1000w 结果不到 500w 就跪了么，否则只是你自己选购的电源功率不够的问题吧。

FallMonkey

2018-09-07 01:54:49 +08:00

看最后一个回复，好像还真不是 PDD 的锅？

realpg

2018-09-07 01:59:30 +08:00

我觉得楼主有必要拍个电源的输出电流的标签，是不是多路 12V 的古董翻新电源啊
那没准就不是电源的锅了

zhangpeter

2018-09-07 07:46:46 +08:00

哈哈哈

hijkzzz

2018-09-07 08:01:21 +08:00

笑出声

lxfxf

2018-09-07 08:39:04 +08:00

公司采购脑子进雷碧了。

59php

2018-09-07 08:43:36 +08:00

早晚要笑死在 V2

mengyaoss77

2018-09-07 09:54:15 +08:00

厉害厉害

zxcslove

2018-09-07 13:10:00 +08:00

电源有单路多路的说法，功率够了还得注意分配电源接口。

deadEgg

2018-09-07 15:33:06 +08:00

pdd 确实让生活上一件弱智的事情变成了复杂的事情啊。

推动世界低龄化发展。

ChalresZhu

2018-09-07 16:01:44 +08:00

原谅我笑出了八块腹肌，哈哈哈

cache

2018-09-07 16:22:46 +08:00

应该是公司采购的受害者

kokutou

2018-09-07 17:09:36 +08:00

公司采购的受害者。。。
振华、海啸不好吗。。。

LudwigWS

2018-09-07 18:56:22 +08:00

还有这样的事情？

zsj950618

2018-09-07 21:59:16 +08:00

结果一堆人在一个英语交流的 issue 里回复中文，还有人在那边特意把原文翻译中文。

呵呵。

sobigfish

2018-09-07 22:05:57 +08:00

@zsj950618 #58 有些人就是喜欢围观，围观就算了，还非得尿一个“到此一游” 😂

way2create

2018-09-07 22:07:44 +08:00

有点意思

fwee

2018-09-07 23:25:46 +08:00 via Android

@zsj950618 蠢货的狂欢

kaedea

2018-09-07 23:57:14 +08:00 via Android

半夜笑出声

thebayarea

2018-09-08 00:08:56 +08:00

3C 产品还是要在京东买

fuermosi777

2018-09-08 02:05:35 +08:00

@zsj950618 确实呵呵了。

codechaser

2018-09-08 02:50:45 +08:00 via Android

真的怀疑，哪个公司采购会去拼多多上采购？

00oo00

2018-09-08 05:57:15 +08:00 via Android

虽然拼多多假货多，但是从硬件玩家角度来看，550w 电源的 12V 输出分为两路是没问题的，毕竟正常思路下一路给 CPU 一路给显卡，可以满足日用，也是电源厂家常用的节省成本方法。
楼主你一不发电源品牌型号二不拍电源铭牌连程序都不走就直接赖 pdd 我觉得不合适

maemolee

2018-09-08 07:52:49 +08:00

哈哈哈哈哈

SoulGem

2018-09-08 16:18:19 +08:00 via iPhone

哈哈哈哈哈哈哈哈哈哈哈哈哈哈