今年好像好多学校的论文都要查AIGC率,想研究一下这个玩意儿

就这次吧,很多朋友的毕业论文都要求查一下AIGC率
最早的时候我了解到的用ai查是不是ai写的,还是gpt一家独大的时候,那个时候我觉得就是扯淡,用自己手写的东西实测,也说99%是它写的

但是现在隔了这么久,应该会有一些不同,包括前阵子看到论坛大佬写的大模型生成文本的水印科普【大模型生成文本水印科普】水印就是把Tokens涂成绿色?
以及花了100多刀爆肝弄出100%绕过AI检测的Prompt

总觉得这个阶段查起来应该会加上点花活了。

当然我也一直在想一个问题,这些网站查aigc率到底是不是真的在查水印?总不能还是用大模型查大模型吧,要是我的傀儡在你之上不就炸了?

蹲个答案,顺便看看佬友们有没有测试与降ai率的法子,我总觉得这东西哪里有问题,但是我说不出来,而且看了一下测评,好像不同的网站测aigc率也不一样,那有啥用…

41 Likes

应该就是搞个类似查重的系统,其实查重还是 AIGC 都只是看一些特征。模型不太可能查 AIGC,因为模型会有幻觉。 其实都是赚钱。

3 Likes

好像人類也能故意寫得很像AI

2 Likes

发给垃圾点的大模型比如文心一言,重写一遍,ai味立马就上来了,肉眼都能看出点东西

2 Likes

对,不过这个特征的标准就不好找了,现在nb点的大模型写的比我写的还像人写的,除了默认markdown文法貌似没什么区别

1 Like

所以现在是查重+查ai?

2 Likes

本质上就是查重的外延

1 Like

查重反正就那样,就那个查ai,对于我这种AI患者来说,感觉有点不爽,虽然平时也都是让ai给个思路而已

1 Like

早就查了

确实,基本上应该还是跟查重的逻辑差不多

2 Likes

先赞,过几天查重先着重使用

2 Likes

一起一起蹲个解答

1 Like

不同ai查重算法差别很大。只用过知网的aigc检测,没啥用…一坨…纯人工写的aigc率10几,差不多20;纯claude写的(有喂参考资料、论文和提示词)aigc率8%

7 Likes

蹲蹲。

我自己的感觉是,至少目前这些查 AI 的网站是不太靠谱的。

上次为了测试这些服务,先测了一段 AI 生成+自己稍微修改的文字上去,大概是 2 个通过 3 个不通过?

然后又传了一段绝对人工写的文字上去,还和刚刚一样,原来的那 2 个通过 3 个不通过。

感觉检测网站的差异太大了。

据我所知目前比较正儿八经要查 AIGC 的话,某些国外大学的一些课程作业会有要求,看 TurnItIn 查的 AI 率。

3 Likes

我感觉ai查重挺神奇的。是否存在误判的情况?比方说某个人的文字语言风格一向如此,实打实自己码出来的文字,然后被判定是ai写的

2 Likes

这我就有点参考了

对吧,我上回看测评,一测一个不一样

1 Like

确实,这个也是一种情况

1 Like

其实我也挺好奇目前的AI查重是基于什么技术来进行的,目前我了解到的AI生成文本检测领域的技术大多为后验检测和水印。
后验检测就是根据AI模型生成的文本与自然文本存在的差异进行区分,或者基于输出词的频率、或者事实判断判断等等。这种技术只要有质量足够高的生成模型,以及自己可以设置的模型参数,比如温度,top-k等,或者提供自己写作风格作为知识库,我认为这种检测是不太难规避的。
而水印技术方面,目前就只有deepmind提供了用于检测Gemini生成文本的水印方案,其他模型提供商没有公开提供这种水印检测服务。感觉这些AI查重也不太可能使用这种方案。
当然,对AI文本的检测是一项复杂的工作,可能涉及到多种技术手段的结合使用。所以我十分好奇目前所谓的AI查重到底是什么机制 :rofl:奈何公开信息太少。
但总的来说,我觉得只要不懒到把AI生成的文本直接拿过来用在论文里,应该都不太会产生较高的检测率。 自己生成的东西稍微改改,对自己的论文稍微上点心应该就没太大问题。

8 Likes

一些关键词替换

2 Likes