看到零一万物发布了自己的编码模型 Yi-Coder 于是使用 LiveBench 对模型的编码相关能力测试了一番。最终结果如下:
连 3.5 都打不过…
甚至不如haiku???
Yi-Coder(9b):要上吗…? 我打GPT3.5(175b)…!? 诶…真的假的?
和大尺寸模型比起来可能有些压力,但是和小尺寸模型比,还是能看的
端侧模型现在哪个编码能力最强