统一回复下上面关于kingfall的
-
我这个月经常在aistudio上刷到让我从两个回复中 2选1 挑哪个更好 反馈给gemini。
之前一直不知道这个2选1是在拿2.5pro和哪个版本比较,虽然有猜测但不能确定。
毕竟有可能是在拿2.5pro的不同版本之间比较(比如可能是微调的未发布的小版本)。
甚至也可能就是同一个模型,随机种子不同。让我选个更好的反馈帮助它训练
但是今天2选1的时候发来这个消息
models/kingfall-ab-test is not found for API version v1main, or is not supported for generateContent. Call ListModels to see the list of available models and their supported methods.
所以看来我这个月遇到的2选1情况大部分是kingfall的测试了(还是仅猜测,无法确保是否"大部分",不过至少能代表我还是用过kingfall的哈哈,之前kingfall泄露的时候,因为它上下文只开放64k,所以我没法用,就没去测试。)
-
说说印象里的感觉(不一定准哈,我都不能确定我测试的是不是kingfall,也有可能是其他未发布的模型,反正每次都是2选1对比,我也能更直接看出差异):
那个模型,输出速度比2.5pro0605慢30%左右(看得出来针对每一个段落都思考得更充分),但是标点符号和情绪化问题基本上解决了,而且明显抗上下文污染更强。
1.标点符号与情绪化:比如说0325的问题严重度为2-3(3及格 2良好 1优秀),0506的问题严重度为6-8,0605的问题严重度为1-2,这个模型(假设是kingfall)的问题严重度只在0-1。
2.角色扮演-性格模拟方面:pro2.5会比较容易受到上下文影响,就是一种入乡随俗的感觉——具体而言就是玩无限流,古风角色在古风本台词就是古风,但是把古风角色带出来进现代本台词瞬间切到现代。
而这个模型,能更好保持角色的统一性,就是古风角色带到现代本,依然维持古风的特征。但是这点我不好说谁更好,开头也提到了,入乡随俗其实也挺不错的。
另外就是感觉它(那个未知的大概率是kingfall的模型),能更好抓住角色的“核心”特质