目前的ai能随着数据和算力的增加而无限增长下去吗?

佬们,有个问题,目前的ai能随着数据和算力的增加而无限增长下去吗?:thinking::thinking:

1 个赞

不知道 但这个问题可以相信一下Anthropic
每次以为大模型发展快要到瓶颈,它总能给我惊喜

量变引起质变,不断增长下去, 或许真的能诞生真正的 AI

:distorted_face: 不太行,随边际收益递减的,实际上有堵无形的墙限制着AI能力的发展。而且整个行业的钱实际上都硬件和算力给赚走了,大模型这端实际上是吃力不讨好的脏活累活,回本周期极长,花大价钱上亿美元训练的模型,可能几个月后就被其他模型直接给超越了。

按照目前这种产业结构是不可持续的,除非硬件端能不断突破性能,或者产能极大提高。

感觉transformer的架构不一定是最终AI的形态,这种大力出奇迹的方式应该是有顶点的。

可能不行,但未必这么快。

提示:这种论调在 o1-mini 发布之前其实流行过一段时间,但互联网没有记忆(

Anthropic这玩意确实牛逼,论文质量确实蛮高的