酒馆用户有福了,怎么AIRP也有竞技场榜单可以测了

AB盲测,还有评分

不过只有单条测试,没有长条测试

榜单是野榜,看个乐

3 个赞

绷不住了,还有道歉的。

这是什么玩意 :distorted_face:

6 个赞

一来,长程任务中人物是否能保持严格人设不ooc是一个很重要的rp指标
二来,复杂提示词下AI是否可以理解,并遵守,是否具备“对人性”的理解是一个很重要的指标
三来,nsfw场景是很多酒馆用户的指标。nsfw写的好不好,色不色也是一个很重要的指标。

这种airp还是很难定量测量感觉,简单的一句话两句话只能看模型在无预设调试下的文风,其实和大家体验的airp差距很大。

4 个赞

之前还看eq榜呢,折腾来折腾去rp的效果太难量化了,基本没啥参考性还是得自己用用,顺便(

光是看这榜里面gpt5.6sol都排到19了,就知道o/的实力了,拒绝一切

4.1Flash 排这么前面,纯纯野榜。

4.6 opus不是第一的都是野榜(

1 个赞