V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
alexapollo
V2EX  ›  程序员

可能是深度学习+拼多多的第一个受害者

  •  8
     
  •   alexapollo ·
    geekan · 2018-09-06 19:06:16 +08:00 · 15250 次点击
    这是一个创建于 2275 天前的主题,其中的信息可能已经有所发展或是发生改变。

    现场: https://github.com/fastai/fastai/issues/751

    今天装了 fastai,发现它的模型(哪怕再简单),都会导致系统死机和重启。

    • DEBUG 了半天,排查了所有的相关环境( CUDA/cuDNN/Anaconda/PyTorch ),都没有发现问题
    • 用 tensorflow / pytorch 单独跑简单的例子也不会有问题
    • 但是一用 fastai,系统就会马上死机,百思不得其解。于是迫不得已发了个 issue

    最终,发现这个问题竟然是因为公司的采购喜欢用拼多多造成的。

    68 条回复    2018-09-08 16:18:19 +08:00
    jadec0der
        1
    jadec0der  
       2018-09-06 19:10:25 +08:00   ❤️ 6
    Issue 应该这样写:Nasdaq: PDD
    wevsty
        2
    wevsty  
       2018-09-06 19:14:00 +08:00   ❤️ 2
    原谅我笑出声。。。

    顺便说一句,用垃圾电源小心硬盘挂,不知道这公司的数据有没有备份又价值多少。
    ballshapesdsd
        3
    ballshapesdsd  
       2018-09-06 19:15:57 +08:00
    哈哈
    alexapollo
        4
    alexapollo  
    OP
       2018-09-06 19:21:12 +08:00
    @jadec0der 感谢指正!
    bearqq
        5
    bearqq  
       2018-09-06 19:25:13 +08:00
    原来是电源辣鸡,哈哈哈
    不买酷妈 /振华,好歹也买个航嘉 /长城啥的啊。。
    只能说你幸运主板显卡硬盘什么的没坏
    alexapollo
        6
    alexapollo  
    OP
       2018-09-06 19:26:28 +08:00
    更新了细节,后面让公司统一换电源
    Pythondr
        7
    Pythondr  
       2018-09-06 19:26:59 +08:00
    所以说到底买了什么牌子的电源
    againstodds
        8
    againstodds  
       2018-09-06 19:36:21 +08:00   ❤️ 1
    笑出了声。
    兄弟,帮你发了一条 Hacker News,如果觉得不妥的话,告诉我我会去删掉。

    https://news.ycombinator.com/item?id=17925471
    SingeeKing
        9
    SingeeKing  
       2018-09-06 19:38:08 +08:00
    原谅我笑出声……

    如果这种造成了严重后果,是否可以去起诉商家甚至拼多多。。
    mrchi
        10
    mrchi  
       2018-09-06 19:39:52 +08:00
    强势围观
    huhuhushan
        11
    huhuhushan  
       2018-09-06 19:41:14 +08:00 via iPhone
    真是笑死了
    bxb100
        12
    bxb100  
       2018-09-06 20:20:15 +08:00
    笑死我了
    TustMan
        13
    TustMan  
       2018-09-06 20:26:47 +08:00
    拼多多被黑的最高级的一次了
    alexapollo
        14
    alexapollo  
    OP
       2018-09-06 20:47:47 +08:00
    @againstodds 可以的,最好带上补充的 debug 细节,会清楚一点
    airyland
        15
    airyland  
       2018-09-06 21:09:33 +08:00
    看了 issue 我的关注点是有多个英文错误。。
    nicevar
        16
    nicevar  
       2018-09-06 21:18:11 +08:00
    哈哈,这次不是保安夜晚起来踩电源线了
    Applenice
        17
    Applenice  
       2018-09-06 21:21:09 +08:00
    哈哈哈哈嗝
    AzadCypress
        18
    AzadCypress  
       2018-09-06 21:22:25 +08:00 via Android
    笑死了
    hanru
        19
    hanru  
       2018-09-06 21:28:26 +08:00 via Android
    码农思维,碰到问题找代码 bug。这种系统死机重启,大概率是硬件问题啊。
    ex2vkf
        20
    ex2vkf  
       2018-09-06 21:28:58 +08:00   ❤️ 1
    如果在拼多多买显卡,是不是真的会买到煤气灶啊
    May725
        21
    May725  
       2018-09-06 21:32:26 +08:00
    是如何发现原因的
    ex2vkf
        22
    ex2vkf  
       2018-09-06 21:35:25 +08:00
    @May725 nvidia-smi 一看就知道了吧。。。。
    iVeego
        23
    iVeego  
       2018-09-06 21:36:08 +08:00 via Android
    The power supply is buy from PinDuoDuo (Nasdaq: PDD), it says it has 550W, but it may be only support ~200W, I doubt it's a fake.

    哈哈哈哈。
    youngsterxyf
        24
    youngsterxyf  
       2018-09-06 21:36:33 +08:00
    @alexapollo 知道的话可以发一下拼多多上这个电源的链接或者截图吗?
    icylogic
        25
    icylogic  
       2018-09-06 21:44:31 +08:00 via iPhone
    的确有训练的时候发现供电不足的情况,现在好像是单卡的 750w,双卡的 1000w。而且公司怎么能允许从拼多多正式采购啊,拼多多有正规发票吗。。
    loryyang
        26
    loryyang  
       2018-09-06 21:50:57 +08:00
    老哥英语水平需要再提升下呀。不过这个坑是有点奇葩
    lunzima
        27
    lunzima  
       2018-09-06 21:55:40 +08:00
    工作站居然不用台达电源
    zizifu
        28
    zizifu  
       2018-09-06 22:00:28 +08:00 via Android
    原谅我,我也笑了
    sobigfish
        29
    sobigfish  
       2018-09-06 22:01:56 +08:00   ❤️ 1
    所以没人关心采购到底中饱私囊了多少?😂
    Lanceliel
        30
    Lanceliel  
       2018-09-06 22:10:22 +08:00 via Android   ❤️ 1
    @lunzima 在 V2 提电源居然也可以召唤出轮子妈……惊了。
    Les1ie
        31
    Les1ie  
       2018-09-06 22:11:00 +08:00
    Nasdaq: PDD $19.03 GMT-4 10:09 静静等今日价格变化

    https://i.loli.net/2018/09/06/5b91350d0ae72.png
    chanssl
        33
    chanssl  
       2018-09-06 22:18:27 +08:00
    你们公司采购这么为公司省钱啊
    tanranran
        34
    tanranran  
       2018-09-06 22:19:01 +08:00
    After debugging for around 8 hours, I found the error:

    TensorFlow and PyTorch's examples use only ~100W power.
    Fastai's example (lesson1) use 80~300W power (not stable, changing fast).
    While monitoring nvidia-smi, it seems like when power usage reach 200W, the system halted and reboot.
    The power supply is buy from PinDuoDuo (Nasdaq: PDD), it says it has 550W, but it may be only support ~200W, I doubt it's a fake.
    After changing this power supply, the issue solved.


    笑死了
    lzjqsdd
        35
    lzjqsdd  
       2018-09-06 22:50:47 +08:00 via Android
    忍不住笑
    livc
        36
    livc  
       2018-09-06 23:17:02 +08:00
    LZ 腾讯的?
    wdlth
        37
    wdlth  
       2018-09-06 23:27:52 +08:00
    原来让你买 Tt 的钱都吃了回扣了?
    kslr
        38
    kslr  
       2018-09-06 23:29:34 +08:00
    又要上八卦新闻了
    pandasoda
        39
    pandasoda  
       2018-09-06 23:37:16 +08:00
    抱歉 笑出声
    wtks1
        40
    wtks1  
       2018-09-06 23:39:38 +08:00 via Android   ❤️ 1
    想起了公司采购吃回扣吃的太多,结果买回来 200 多台跑 linux 的电脑各种故障频出,一开始也是各种查询日志各种重做系统,最后才发现全是硬件垃圾的锅
    green15
        41
    green15  
       2018-09-06 23:58:14 +08:00 via iPhone
    笑喷了,再检查检查,说不定还能找到槽点
    azh7138m
        42
    azh7138m  
       2018-09-06 23:59:51 +08:00 via Android
    issue 可以关掉了吧
    epkT6QJ3RSaz6AnJ
        43
    epkT6QJ3RSaz6AnJ  
       2018-09-07 00:26:24 +08:00
    围观
    napoleonu
        44
    napoleonu  
       2018-09-07 01:49:55 +08:00
    号称 1000w 结果不到 500w 就跪了么,否则只是你自己选购的电源功率不够的问题吧。
    FallMonkey
        45
    FallMonkey  
       2018-09-07 01:54:49 +08:00
    看最后一个回复,好像还真不是 PDD 的锅?
    realpg
        46
    realpg  
       2018-09-07 01:59:30 +08:00
    我觉得楼主有必要拍个电源的输出电流的标签,是不是多路 12V 的古董翻新电源啊
    那没准就不是电源的锅了
    zhangpeter
        47
    zhangpeter  
       2018-09-07 07:46:46 +08:00
    哈哈哈
    hijkzzz
        48
    hijkzzz  
       2018-09-07 08:01:21 +08:00
    笑出声
    lxfxf
        49
    lxfxf  
       2018-09-07 08:39:04 +08:00
    公司采购脑子进雷碧了。
    59php
        50
    59php  
       2018-09-07 08:43:36 +08:00
    早晚要笑死在 V2
    mengyaoss77
        51
    mengyaoss77  
       2018-09-07 09:54:15 +08:00
    厉害厉害
    zxcslove
        52
    zxcslove  
       2018-09-07 13:10:00 +08:00
    电源有单路多路的说法,功率够了还得注意分配电源接口。
    deadEgg
        53
    deadEgg  
       2018-09-07 15:33:06 +08:00
    pdd 确实让生活上一件弱智的事情变成了复杂的事情啊。

    推动世界低龄化发展。
    ChalresZhu
        54
    ChalresZhu  
       2018-09-07 16:01:44 +08:00
    原谅我笑出了八块腹肌,哈哈哈
    cache
        55
    cache  
       2018-09-07 16:22:46 +08:00
    应该是公司采购的受害者
    kokutou
        56
    kokutou  
       2018-09-07 17:09:36 +08:00
    公司采购的受害者。。。
    振华、海啸不好吗。。。
    LudwigWS
        57
    LudwigWS  
       2018-09-07 18:56:22 +08:00
    还有这样的事情?
    zsj950618
        58
    zsj950618  
       2018-09-07 21:59:16 +08:00   ❤️ 2
    结果一堆人在一个英语交流的 issue 里回复中文,还有人在那边特意把原文翻译中文。

    呵呵。
    sobigfish
        59
    sobigfish  
       2018-09-07 22:05:57 +08:00   ❤️ 1
    @zsj950618 #58 有些人就是喜欢围观,围观就算了,还非得尿一个“到此一游” 😂
    way2create
        60
    way2create  
       2018-09-07 22:07:44 +08:00
    有点意思
    fwee
        61
    fwee  
       2018-09-07 23:25:46 +08:00 via Android
    @zsj950618 蠢货的狂欢
    kaedea
        62
    kaedea  
       2018-09-07 23:57:14 +08:00 via Android
    半夜笑出声
    thebayarea
        63
    thebayarea  
       2018-09-08 00:08:56 +08:00
    3C 产品还是要在京东买
    fuermosi777
        64
    fuermosi777  
       2018-09-08 02:05:35 +08:00
    @zsj950618 确实呵呵了。
    codechaser
        65
    codechaser  
       2018-09-08 02:50:45 +08:00 via Android
    真的怀疑,哪个公司采购会去拼多多上采购?
    00oo00
        66
    00oo00  
       2018-09-08 05:57:15 +08:00 via Android
    虽然拼多多假货多,但是从硬件玩家角度来看,550w 电源的 12V 输出分为两路是没问题的,毕竟正常思路下一路给 CPU 一路给显卡,可以满足日用,也是电源厂家常用的节省成本方法。
    楼主你一不发电源品牌 型号 二不拍电源铭牌 连程序都不走就直接赖 pdd 我觉得不合适
    maemolee
        67
    maemolee  
       2018-09-08 07:52:49 +08:00
    哈哈哈哈哈
    SoulGem
        68
    SoulGem  
       2018-09-08 16:18:19 +08:00 via iPhone
    哈哈哈哈哈哈哈哈哈哈哈哈哈哈
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1187 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 32ms · UTC 18:40 · PVG 02:40 · LAX 10:40 · JFK 13:40
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.