mimo直播训练这是完成了吗

flash的显示stop了,这是结束了吗?

评测分数还是在25轮的,不知道更新完分数能到多少

the pro run restarted at step 17 due to a GPU OOM issue caused by expert load imbalance. we have adjusted the training parallelism strategy.

咦,服务器gpu爆内存了吧。 GPU OOM

环境挂了,在修呢吧

这种大规模训练,中途出问题修环境很正常

炸了几次,原来连大厂也出这种问题,我放心了不是我菜 :rofl:

不知道欸 可能服务器炸了吧 绷不住了

炸显存了很正常,应该是MOE专家切的有问题导致有节点的专家大量调用把显存炸了

原来不是我菜,是大家都菜啊:lark_085: :lark_085: :lark_085:

训练崩了,哈哈哈,看来是真的直播,不是假的看板

那条信息崩的不是pro吗,感觉Flash是已经完成了,或者说阶段性完成了

这个费用花费主要是指电费吗?还是什么费用?不可能是调用 API 的费用吧。

可以理解成小米从数据中心租显卡的费用,电费一般是数据中心自己出的

谢谢佬的解答,我以为小米是在自己的显卡集群上互训呢,没想到还是租的显卡。

有肯定是有的,也有从金山云租的卡,就算是自己的显卡集群也是需要按时间计算使用成本的

我问一下现在自己自己买的显卡是不是就是启动成本高,但是卡很保值,卖掉套现甚至升值?

对,前几个月十万配的用的做黄果的显卡现在已经赚了一成了,虽然没做出任何视频,就是这么魔幻