这两天赶在天翼云免费额度到期前,又测试了一下几个rag系统。
因为ragflow和dify不支持天翼云的API,所以测试的主要是cherrystudio,针对同一个小说,同一问题,cherrystudio的表现出奇的好。而且这还受功能所限,没有rerank模型加持的情况下进行的。
看来我之前推测的,免费使用的cherrystudio的商业收益将会来自rag,还是靠谱的。
不过,现在这几个rag都存在一个共同的问题,那就是资料库归档条理性的欠缺。最明显的例子,就是我这次测试的是小说,是有故事线先后顺序的,而deepseek是按照资料库的分块进行分析,这样自然就会忽视前因后果,影响到答案的逻辑性。
下次转为有序号的json文件试一下。