LaTero
2 天前
热门,训练数据多,且公开文档好的领域会好一些,但一些比较冷门的就很差。还有就是数学、算法等基础的和语言、框架无关的东西厉害。有些领域没什么开源项目,效果就差很多。你要是用那些没什么文档的库(比如 dear imgui 和虚幻引擎,体感估计文档覆盖不足 5%),别说正确了,很多时候连编译都过不去。最近让 AI 给虚幻引擎写个简单的算法,试了好几个 AI 一起写。有的完全就是在编 API 。GPT 尤其严重,真的给我看笑了。其他 AI 幻觉还能沾点边,比如 Deepseek 把 HeapPush 拼成 PushHeap ,自己改一改还能用,但是 GPT 真的纯纯瞎编,还喜欢装模作样地在结尾列几个不存在的“文档引用”( url 是瞎编的)。Gemini Pro Previw 2.5 Pro 相对来说还算好的,但是问题还是多,做了很多无用功,比如不必要的排序,从没用到的参数,莫名其妙的元信息(虚幻引擎特有的东西)最后我自己手动删改了不少。还有就是解释源码,我发现 AI 其实不怎么看内容的,主要就是看函数名,然后望文生义,瞎猜。有些时候因为历史遗留 a.k.a.屎山等原因函数名并不恰当,AI 还是不看源码固执地声称这个函数作用就是和函数名一样。我开始还以为是插件在优化 prompt 把上下文切了,就直接复制整个文件到 openrouter 和 google ai studio 里,结果还是一样。不知道前端等热门且开源丰富的行业 AI 是不是会好很多,但是我自己的体验根本不是很厉害。